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数值 代数 是 计算 数学 的 重要 分 支 ， 它 是 研究 各 类 代数 问题 
的 数 得 解 靶 的 理论 ， 全 如 矩阵 的 变换 和 分 解 、 线 性 和 非 线性 全 
数 方 程 的 解法 、 和 矩阵 的 特征 信 及 符 征 回 量 的 求解 问题 等 ， 

量子 力学 、 结 构 力学 ， 网 络 分 析 、 火 也 测量 、 机 械 振动 、 
管理 科学 等 应 用 技术 学 科 中 提出 的 大 量 的 计算 问题 ， 大 都 直接 
归属 于 计算 数学 。 而 计算 数学 名 分 支 中 的 问题 ， 如 有 限 元 方 
法 、 谱 分 解 理 论 、 稀 纹 和 矩阵 问题 、 最 小 二 乘法 问 题 、 数 学 规划 
与 组 合 数学 问题 又 都 站 接 或 间 护 成 为 数值 代 妆 的 重要 阁 录 开 广 
油 的 应 月 场所。 因此， 数 生 代数 的 研究 和 发 展 不 仅 珀 接 排 动 凑 
计算 数学 的 发 展 而 且 也 是 其 它 技 术 学 科 发 展 的 下 要 前提 ， 

古 殿 代数 理论 ， 对 于 代数 问题 解 的 研究 ， 已 月 于 完善 ， 但 
当 未 知 数 的 个 数 较 多 局 ， 其 数值 解 的 获 短 ， 则 仍 是 一 个 困难 的 
问题 。 即 使 在 快速 电子 计算 机 当地 以 来 ， 这 个 问题 所 面临 的 挑 
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展 ， 把 数值 分 析 中 有 关 数 值 代 数 的 章节 ， 适 当地 给 于 扩充 和 引 
由 ， 亲 时 也 为 一些 新 的 实用 的 方法 的 学 习 和 探索 提供 初步 的 导 
引 。 对 于 重要 的 方法 ， 将 以 接近 语句 的 形式 把 它们 写 出 来 。 自 
然 ， 算 法 描述 是 理论 分 析 和 推理 注 算 的 结 遇 ， 世 是 计算 的 有 效 
性 和 经 济 性 的 统一 ， 而 不 是 规则 和 杂文 的 堆砌 。 

本 章 将 讨论 一 些 存 以 后 各 章节 由 都 要 用 到 的 工具 和 定理 ， 
它们 包括 ， 初 等 矩阵 、 征 阵 的 分 解 以 及 有 关 特 征 扰 动 方面 的 问 
ao 

今 将 全 各 统一 使 讨 的 符号 一 并 在 此 列 出 。 除 维 数 和 足 码 以 
外 ， 通 常用 小 写 希 障 字 母 代 表 数 ， 用 小 写 黑 体 拉 丁字 母 代 表 向 
量 ， 用 大 写 的 希腊 或 拉丁 字母 代表 矩阵，A7 RRE 阵 4 的 转 
EL, А" 则 表示 它 的 共 辊 转 置 ， 用 R". C" 分 出 表示 维 实 和 的 和 
复 的 线性 空间 、 用 R C” 分 别 表示 # 行 欣 到 的 实 或 复 的 
矩阵 所 成 的 空间 ; 短 阵 有 4 的 列 一 船 记 为 &， 而 以 4; 或 4;; 6 
示 其 在 位 量 (7,0) с: Ше, Ж EIR í Я], m 

e= Уе, 
则 表示 分 量 人 多 为 1 的 向 量 ; |х!, [А 198714 Et x M 
阵 和 4 的 分 量 的 绝对 值 做 成 的 向 量 和 甜 陡 。 在 不 致 发 生 误 解 时 ， 
单 绯 阵 的 维 数 . 零 陈 或 零 向 量 的 维 数 将 不 特别 指明 . 用 det (A), 
АСА) 分 别 表示 逢 阵 4A 的 行列 式 和 它 的 一 个 特征 值 ， 而 用 


r(A) = Уа, дз 
í = í 
和 P(A) = max|A(A) | (1.1.2) 
分 别 表 示 4 的 迹 和 谱 半 径 !， 用 
Та Ts sss Я 
A. ， : (1.1.3) 
"| 7, ВРУ. 


ЖТ ЧА ВЯ do eesis 各 行 和 天 天 务 列 的 交点 处 的 元 素 


т 
«2. 


在 太 作 特殊 解释 时 ， 向 量 范 数 上 zj 人 恒 指 1, 空间 中 的 范 数 ， 
Ер 

|= (ких) 1, (1.1.4) 

而 矩阵 范 数 | 4 是 指 与 向 旦 范 数 相 容 或 从 属于 它 的 一 和 范 数 ， 
Bj! 

ПА Si Al ial (1,7.52 

或 再 加 圭一 个 限制 ，(1.1.5) З ЛР A x= O 成 立 . 


52 初等 矩阵 


我 们 把 形 如 
EU, v, 0) =T—- ouu" (1.2.1) 

PERE EIZE, Hh u, o E n- ЯЕ, о 是 数 ， 该 阵 是 
-一 个 单位 阵 与 一 个 秩 1 乱 阵 的 组 合 ， 当 要 把 一 个 一 般 形 式 的 短 
阵 约 化 为 某 种 标准 形式 或 任何 讨 缩 形式 时 ， 和 常 需 对 矩阵 进行 一 
系列 简单 的 相似 变换 ， 而 这 神 工 作 通 常 是 借助 初等 阵 来 实现 
й), 

首先 指出 在 (1.221) Тр, йо Ж, и, ө] 
Ж, Ж ЁЁ (1.2.1) 对 乘法 是 封闭 的 。 实 际 上 


E(N, YV, о)Ен,®,т) = E(u, u, À), C22) 
其 中 ， 
А= отр!и-0—1, (1,2,3) 
HT EM, v =I 2 А=0 时 解 得 
r= —0(1—0®'ц), 1-ovřu#0, (1,2,.4) 


61.2.4) НЕШУ кй, е, a) АНА [Ет ут 
的 计算 。 


直接 计算 Eu，b，o) 能 行列 式 ， 还 可 进一步 证 明 
detE си, ©, о)=1—п®”и, (1.2.5) 
ТЕН ДЛТ КОАП Т 2 E H 
2.1 FARER 
P;;=E(€;- ê, е, -е;, 1) 
RRIS ifi i fr. LIRIA 09 DERG UTO 布 外 ， 其 
RICREARE ТАЈ, PR ITI Е. 


i Zi] j 21] 
D 1 {ТҮ 
1 0 11] 


HF: PuPus IE Pu ЭОК, ШЕР; 是 简单 贡 正 区 阵 。 当 证 
Pi ERRIRE, KARRE ER i n j ITHE M, 
EER UH i. T WAAK, 

2.2 HFE 

Ч 
PORESKE, Hi (о, eea) 代表 O, 2, ws. R) 的 一 个 
ЖЕЎ, жоц, КМГ 
(i, G), ї=],?, =, 
TRAUS 1 М, 11 ®. BIRER TITANA БА 
有 一 个 1 ， 负 此 ， 其 转 置 阵 也 是 排列 阵 ,. 并 旦 | 
Por san PEP С 126) 

[АШ ДЕЗЕ, БЕР Буар Р; HABERE. CER 

是 单位 阵 经 有 上 随 次 换行 的 络 时 ， 因 此 其 行 纪 式 的 值 均 为 士 1。 

EEL, fi 


Doan 二 ka ee. (1.2.7) 
ESL 


当 用 Pa, "tan ERAEN, HARARE а, 行 换 到 


F if AH, Mi EEPE E e 2] 0 3 i ZU, 
2.5 HEER 
ЖЩ 
L;=E(U;, €j; 1), (1,2,8) 
erl;=0, Кє] 
ВОЯ Е, IEE ЖП) АУ АЈ ДАЈЕ, is 


Ir = (0, ., (0, l; EPELI 1) , 


JU] 
pi 
Ls. к i (1,2,9) 
= I 
不 难 验 证 
Li'=E(-li, es 1), det(L;)=1, (1.2.10) 


当 用 ЕЗ РАТ, ЗЕ ЛКАНВЕН АЯЗ j 行 分 别 38 以 
~hag = la: HARRIMIN R +, nn ATR, A 
RH, AB525741 # 38 6 УЛАЗЕ Д -bnp Sheno, 
~ai ЗЕЛ j Я. BIERE R AERAR RERS i 行 以 下 的 
DARJI AR ZER ABERJ S i 7]. REHE Fë #= ЖО 
时 ， 仅 需 把 L 换 为 -1:， 实 际 并 不 进行 算术 运算 ， 因 而 并 不 引 
进 舍 入 误差 。 不 仅 如 此 ， 在 计算 形 如 
L.L sel, Е eLp 
的 和 矩阵 乘积 时 ， 也 不 会 引进 误差 。 例 如 乘积 抢 阵 Lie L. 的 第 
i 列 只 不 过 是 L 的 第 产 列 的 重 抄 而 已 。 类 似 地 ， 若 记 
Ri=LT=EFE(e, L, D, 
ШЕ! 


Uy 
* 


х 
АВВ = ык 
: 1 Хх 
N Ü si 
应 是 单位 上 三 角 阵 ， 共 第 1 EKER Ө Ag 8 bb. 
2.4 初等 Hermite $E R£ 

Б H=EXu,u,2), [uj =1 (1.2.11) 
称 为 初等 Hermite 和 矩阵， 文献 上 由 于 强调 的 侧面 不 同 ， 有 时 
又 被 称 为 Householder 矩阵 或 镜 家 反射 矩阵 ， 

不 难 验 证 它 既 是 Hermite 阵 又 是 西 阵 。 由 于 它 还 是 一 个 对 
合 阵 ， 因 而 它 的 首 就 是 其 自身 。 据 (1.2.5) 及 (1.2.11) 易 知 ， 
Че (Н) = -1, | 

申 于 下 面 三 个 定理 ， 使 这 KEPET IERE AY 3830 Б ЖЕГП 
有 着 十 分 重要 的 应 用 ， 

定理 1.2.1 对 任意 xEC"， 存 在 初等 Hermite PEH, f# 


Нх=@ё@\|, (1.2.12) 
Жш ја] = |x]; 特别 , 可 取 
i a = —sign(Re (£1) ) xl|, (1.2.13) 


ин A 是 x = (6 s. ED 61 78, 
证 明 іс Н=]1-2ни”, H 


Hx=x-2(u!ix)yu =cëe,, 


改 
(х- ае) @ бл ЖДУ 
и = [х-те|[ е 0 узы 实数 )， 
f ни" 与 9 污 关 ， 取 8= 10。 考查 


рх —ае,||?= 2(]xl2 - Ке(аё,)), (1.2.14) 
当 按 (1.2.13) о, (1.2.11) Gw НОВЕ ES 的 有 


E 6 > 


作为 本 定理 的 应 用 ， 可 证 明 下 述 著 名 的 8Schur 定理 ， 

定理 1,2,2 任意 垂 陛 可 以 经 由 西 相似 变换 化 为 上 三 角 阵 。 

推论 1.2.1 主 闹 矩阵 可 以 经 由 西 相 似 变 换 化 为 对 角 阵 ， 

由 于 定理 1.2.2 及 其 推论 的 证 明 ， 并 借助 第 阵 的 特征 传 及 
特征 向量 ， 可 知 ， 难 计算 矩阵 的 特征 问题 来 说 ， 定 理 本 身 并 非 
是 构造 性 的 ， 但 它 却 是 构造 逐次 逼近 法 求解 惩 算 特征 问题 的 基 
їй. 

ЖЕРЕ 1,2,2 及 其 推论 的 证 明 ， 已 收入 本 章 的 习题 人 
章 中 ， 我 们 就 实 邱 阵 的 情形 ， 给 出 了 一 人 类 似 的 更 为 适用 的 结 
ж. 


$5 和 矩阵 的 分 解 
首先 ， 我 们 指出 ， 对 于 任意 的 矩阵 AEC""， 设 其 秩 为 


pP ， 则 可 以 找到 秩 为 了 的 两 个 年 阵 M 和 了， 其 中 M 有 了 P 个 列 ， 
PAP TIT В МЄС"? РЕС", 使 


А= МР. (1.3.1) 
我 们 将 用 两 种 方法 说 明 上 述 论断 ， 
5.1 列 主 元 法 
设 A= A = (400°, 0, 6,0507) 0, (1,3.2) 
< ji ИВ 4;°°550 的 最 小 的 是 码 ， 且 令 
| efa; | kuma кр (aD 
Вр елау 是 的 ”的 依 模 最 大 的 分 量 ， 作 
ЯЙ? +Р A = (940, а, 6,00), Кол 
记 


= (1, Lai °, La), 
la = еТа\®/еТ 40, f = 2, n, (1.3. 5) 


Li=E({l, ё, 1), 
A= rL, J 1, 
则 在 | 
A = (40, ау, er Mt) (1.3,6) 
中 ， 其 第 一 行 因 ета! +0 必 为 非 零 行 ， 但 其 前 六 一 1 列 上 的 元 
жыка? 的 第 一 行 以 下 的 元 素 全 为 0。 
如 果 А 的 第 一 行 以 下 多 为 地 ， 刚 二 : 
APh LilA = Pi LI A! ' (1.3.7) 
RAe A, 有 : 
ПАЧ = (Li!e) (ЕТА), | 
可 见 Ac 已 经 表示 成 1 ARHAR Puli e 与 一 个 韭 堆 
的 行 向 量 e At ВОЗЕН, РЕ At 的 秩 也 只 能 是 1。 基 所 述 论 
Er EE AR. 
如 果 А 的 第 1 行 以 下 第 六 FHUAR А ЗЕ 32, 15 
4 的 铁 为 的 前 提 下 可 知 А' 的 萄 应 为 D~ 1， 对 行 n 使 用 归 
纳 法 ， 可 设 a 


онча р ао seat 5 
A: L? = (А? : ASU) =~ j Sas ваф вед : 和 "өт АДА { 
| 0 ‹ Аз j 7 
1 i 
= Ффо фаз фоа фен |> 
v 0 д ; 


而 握 归 纳 法 可 设 3 s MP, WE М, РН O p- 1 H. £ A 

р- і p— 1 行 的 阵 ， W P= (00Р), P ДК 23 p- 1 (R # 
Tn ig 

| 0 

A=. 1 (Аду) + Р 


К . “М?” 


LAD‘ ALD) 


1: : 
о: с Ü +P 1 
жа дд КАНТЫ ЖК. НТ 
1 Р АЙА 
o’ | 
А‘? =: Pi | | 
И, | 
0 fy P 2 у 
<> 
"+I 
Та. Ар А 
Ра š =M, | | |= °, 
ЕС У] 0 Р ; 
0 
ШЕ ! | | 
A = МР (1.3.8) 


ЖЕРК. 

f#En=m., AY 非 奇 异 的 前 提 下 ， 如 果 进 -一步 假 定 M = 工 是 
КЕЕ, P= R Ж БЕЛИ, Н, RAAH = f 
分解 : T 

A=LR, (1,3,9) 
可 证 此 种 分 解 是 唯一 的 ， 
5.2 #3 Hermite 阵 法 

这 里 ， 我 们 主要 有 以 下 结论 。 

设 AEC™" 是 秩 为 P， 则 存在 秩 为 p 的 两 个 年 阵 WW 和 R， 
它们 各 有 卫 个 关 和 了 个 行 ， 其 中 到 的 烈 还 是 互相 直 交 的 单位 向 
б, Œ 

А = WR. | (1,3, 10) 


记 
A=A U= (LD, 6,257), (1.3.11) 
令 @ А 91 的 第 一 个 非 零 鹿 , 依 定理 1.2.1 作 初等 Hermite 


阵 


Hi=1- 2и (1,3„12) 

使 
Has = y; e, |У, | = leir] Æ 0, (1.3. 13) 

令 
AGH AY, (1.3.14) 


此 时 , A PRAT ii — 1 列 是 零 向 量 , 第 j, 列 除 第 1 个 分 量 YA 
外 ， 其 余 分 最 都 是 零 。 

WRA” 的 第 1 行 以 下 全 为 零 ， 这 时 ， 由 

AY = НПА H At (Нуе) (eTA) (1.3.15) 
以 及 Н,е, EFFAN, eA U ЗЕ {Т НИЛ At 的 秩 是 
1, ЖЕРАР. 

WRA” 的 第 1 FAFE i 列 以 右 的 矩阵 A ЗЕ ©, 用 
归纳 法 ， 可 设 

Ao = RO ОР, (1.3.16) 

EA” 的 秩 为 了 的 前 担 下, A 、 青 '””、 忽 的 秩 均 应 是 Pp 一 1， 
BA Hp-1 АЯН ЕАО r BE RER, RO H p- 1 个 线 
性 无 关 的 行 向 量 组 成 。 这 时 ， 由 


өе шр ра} m амр ГАО} А 
A: 1: =.) ! Фоа чае ото rao ёсе оат ёга сот зго ET] =s Н фов tps... зез эзе тте ере 
0 ": АБ i | 0 : НБ 
А г 
А Ау 0 
— us ез ее?» +. ГЕДТЕЛГАДДАДАА i, 


这 里 


* 70 * 


1 0 [~ | 
ИЕ | 
і : е” 
“0 0 КР 
令 
Е EE 0 | ВИ 
ЕЈ Tio во 
ШЕН А = НА, 5 
А = A= WR (1.3.17) 
具有 所 要 求 的 形式 。 


є п=т, H 4” 和 非 奇异 和 村， 如 果 进 一 步 限制 尽 为 对 角 元 
为 正 数 的 .上 三 角 阵 品 ， 则 分 解 是 存在 且 唯 一 的 。 

首先 ， 当 及 非 奇 异 时 ， 由 于 A=WR гп, W. К ВКА: 
n， 又 WW 的 各 列 足 互相 正 交 的 单位 向 量 ， 此 时 W 是 王 阵 ，R 可 
以 写成 三 角 阵 的 形式 ， 它 的 对 角 元 一 定 可 以 表示 成 正 数 ， 因 为 


R 的 对 角 元 为 
Р = Ya е! *, 0, 是 实数 (1.3.18: 
k= 1,2, ++, 2% 
由 
WR = (WD) (D `! R) = QU (1.3.19) 


这 里 ，D= іав (е, uee), UDIR = U 是 对 角 元 为 正 数 的 
EZAR, Хр, РО =WD фуд. ЛАТ 
A= QU, (1,3.20; 
其 中 8 是 西 阵 ， 忆 是 对 角 元 为 正 数 的 上 三 角 阵 。 分 解 的 唯一 
性 ， 则 可 由 下 面 的 分 析 说 明 ， 计 
QU, =Q,U., 


。 11 ， 


则 
QUQ = U, ра 
wR a Д ЕМ Е ВА r. ЛАРЕ, rE IBN a ДУ ТАЈ ВЕ SY A. 
в, 于 是 O = Q, , ¿l = U,, 
3.3 三 角 分 解 的 表现 
当 AECT EA, A a RESIT SAI A 
: A= LR. 
Жиз. Et р, REAME FZ Р, ЗХУ 
ос в анж, БЇ?! 
A= LDU, (1.3.21; 
其 中 工艺 单 位 下 三 角 隆 ， ERMEE D Рат) 
е, ТУНА к с. D. U, 
利用 短 阵 的 分 块 表示 法 ， 设 


A= [2° Ара ]=[' 0 |" j: Í 
Аз A:; Lai 1%» Dee 0 Uz: i 
(1.3.22) 


ЭШ, ИБА, л, Un Ероса) БҮ, ЯТ 
Ал = риби» 


det (А |) = дер. |) = O1Ó 55 re 人 (1,3.23; 
Di, = diag(ô,, e, Ôp)» 
1, 2, ==. 1» 2, ,Җ+,р—1 
p= a( =). А(” ), (1,3.24) 
l, 2, ЕА Jis 2, ‚р – ] ` 
由 
СА, A.) = L 1.140110 Юу»); (1.3.25) 
由 于 两 端 都 是 行 数 为 PU as, R IARRI p АК 


时， 得 出 的 行 邹 式 也 永 相 等 。 特 别 ， 当 两 端 取 1 (p— 1D 列 并 
附加 以 第 了 到 (>р) HJ, 4% 


.12. 


A|” ‚4,*»,р-—1,р 


j| 
1, 2, s., р 一 т, 


中 - det (Li) det( DyU Ё ИР 
12, p —1,] 


1,2 °... р-1 р 1.2, эзе р 
ны = A| к 的 “A| i 1, (1,3,26) 
t, 2,1, P- 1) r l, 2a eg p 


ZE, up ЖОР Cp, j) 的 元 素 。 比 较 
Ап 1_ [Ln Do UL] 
ПЕ 
WE үг n 44730 р ЗА], Т p 1 行 和 第 ?1 行 形成 行 
FIR. HF 4600,1) =1, #: 


1 2+, p~ 1 і о I 
L = A( ” | )/^ ( Gp), (3.27) 
s2, e, p —- 1, p ЫЯ: 


$4 和 矩阵 的 Jordan 标准 型 


АСС". ИИБ ИП М, #FfE2 2 Ө АРЕН, ЇН 
Т, | 
H''AH=J= 7% 1.1.1) 
| Tos 
其 中 
“Ai 1 
П. i (1.4.2) 
i йр. 2 


A (L= lees) 是 4 的 特征 值 ， 天 为 对 M A A9 E Jordan 块 ， 
МЕ ЙЕЛ. ЯЛЕ, ФЛЭШ: УЯ] МУ [Н] 
一 特征 值 的 Jordan НАНА. ГЛ. Н Л 09 L ER 
k Жл A RIESE ЕЕ, KIR s 表示 对 应 同一 特征 值 的 
Jordan 块 的 编号 时 ， 则 (1,4,1) 可 重 写 为 

.]3.- 


Н-'АН = diag (t, е, Д7, e, JU. JI), (1.4.8) 
我 们 把 (1,4,1) ЯЯ СІ, 41,3) FEH A Ту Jordan фк 准 型 ， 而 
Ж#Н АН — TEREE. 

j SA ВОВ т, UN 


Вт 551 


ЩЕ пу? БЮТ, АЖИ Т-Н, В 
H-'AH = diag (д, ‹‹*,А,). (1.4.5) 
据 习 题 (1, 12)， 任 意 正规 阵 均 焉 相似 村 一 对 角 阵 ， 于 (1, 4。 5) 
两 端 各 用 Он ЖДО ЖЕ ЖМА Ж, ХАО ВЕ, ШИ] {тїш 得 
HIERE, ИҢ, FR FA ABERE ФАБИИ T — EM 
阵 ， 所 以 ， 相 似 于 对 和 角 阵 的 阵 又 被 称 为 可 正规 化 矩阵 ， 但 西 相 
似 于 对 角 阵 的 阵 则 必 忠 正规 阵 。 
pR F Ш (1.4.1) F 
AH = HJ = Hdiag (Ji, ++, J.) š 
їс p J A Sss AES Вода ЈА 
AHe. = Ah, = A.R, 
这 里 REH уй p 3]. JRR, ДЕА НУХА РА, 的 特征 
Ба, 247, 的 附 数 关于 1 HEW MT J, HRKI Fil W 
旭 对 应 天 的 第 2， 第 3…… 歼 的 下 ， 由 于 WE 
Ah =A Re th AR = Ah +h (1.4.7) 
AmA RE A НИЕТ, чак ибн 
量 的 个 数 应 为 4 的 Jordan 标准 型 中 的 Jordan 块 的 个 数 , ИП ғ. 
к=п, (1. 4.8) 
定义 1.4.1 MJr<n, WIENE АПОУ hi: y: ВЕРЕ H 
的 全 数 小 于 和 矩阵 的 阶 数 时 ， 称 4 为 亏损 (defectivse) Ж РЕ; 
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反之 ， 则 称 为 非 亏损 的 。 
据 此 可 知 ， 可 正规 化 的 矩阵 应 是 非 亏 损 的 。 特 别 ， 当 A 的 
所 有 特征 值 均 相 异 时 ， 划 和 应 是 非 亏损 的 。 相 似 于 正规 阵 、 刁 
正规 化 、 非 亏损 这 是 不 河 说 法 的 向 一 矩阵 类 ， 因 其 具有 重要 的 
应 用 ， 是 需要 着 重 进行 赋 究 的 。 
当 有 是非 志 损 矩阵 时 ， 出 
Н-'АН = diag (41, °°, An) 
两 端 同 用 D-: 及 了 去 左 乘 和 右 乘 ， 这 旦 D ЕКЕЖ 
角 阵 ， 可 得 
(HD) А(НР) = diag (Au, =", An)» (1.4.9) 
适当 选 拌 D 可 使 HD 的 各 列 成 为 单位 长 向 量 ， 它 们 都 是 A 的 
特征 向 量 ， 其 个 数 为 n， 且 彼此 线性 无 关 ， 此 时 称 A 是 具有 完 
全 标准 化 特征 向 量 系 的 矩阵 。 如 果 仍 把 HD 记 为 HH， 因此 ， 当 
4 非 亏 损 时 ， 我 们 总 可 以 假设 ， 它 具有 变换 气 阵 刀 ， 其 各 列 就 
Баа :全 标准 的 特征 向 量 组 成 的 ， 记 


= (Ху, .,х,), |х| = 1, (Sks SH). (1. 4,10) 
Еи 互 -也 随 之 而 确定 ， 记 
H- 1) = (gp 82,9060), (1.4.11) 


РА =, [Sa] = 1,15 k= 1,2, "n3; 

И] g, = (Н Dre, ЕТ = еН), Ш 

Н-!А = diag (A), **, An) Н! 
可 得 

ЕТА = АТ, k=1,2,." 
FE Br 为 A 的 对 应 : ee ee 而 y= g/g 为 
和 A 的 对 详 于 特征 值 的 标准 化 的 左 特征 向 量 。 由 前 面 的 分 析 
可 知 ， 当 4 是 非 亏 损 的 矩阵 时 ， 则 存在 A 的 右 的 和 左 的 完全 标 
ЖШ ЖЖ. EFH (Н, и 
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erH He, i gx; = _ ух, ={ 


1, i=] 


yf” ка (1.1.12) 
5,0, i=j, 
BE E g RPR ZE H EE ka ЕЛЕШЕ Л] 8 Z JE ЗУ — + 3 IF 22 Ж. 

fE (1,4.12) Hu K xo у, 部 是 单位 向 量 ， 氛 Cauchy 不 
FI Тү 

5.1, ¿= 1,2, 1, (I. 4.138) 

МА ЖЕТСЕН, А Е H НҢ Е, ШЕ], EA. 
4.11) E H 1: HE, gA g =x; Gsi, n), МЕ, 

| 'si=|g]=1 с алм, 
ИНТЕ ЯУ: Ж R эе Sr bnaE t, O 32 ЛЕ ЭЕ ЖЕРДЕ [п] Ж ВВЕ. 

注意 ， 当 4 的 特征 值 均 相 异 时 ， 则 4 显然 相似 于 以 4 的 特 
征 伟 为 对 角 苑 的 对 角 陈 ， 因 丽 必 为 非 苇 损 阵 ， 它 的 对 应 于 某 一 
特征 入 的 特征 向 景 ， 如 不 汗 特 征 向 量 各 分 量 问 的 比例 关子 ， 应 
是 啡 一 的 ， 甚 变换 插 阵 了， 如 不 计 列 的 次 序 ， 则 也 是 唯一 的 。 
但 当 和 是 特征 值 均 不 相 民 的 在 亏损 阵 时 ， 其 变换 矩阵 妃 将 厅 是 
唯一 的 ， 即 4 订户 有 不 局 的 变换 系 阵 五 能 同时 人 鱼 4 成 为 对 名 
阵 。 例 如 ， 当 4 是 单位 阵 工 村， 实际 上 和 任意 的 非 奇异 第 阵 都 可 
ЖА ТЖ. : 

RZ, ЗП НА НЕН АЕА А, B 
НИОР Е, БКА ЈАЈА. В ЕЕН АЕ, ШЕ 
Бр, E 

Н-ІАН = diag (Aj, yy À.) 


(1.4.15) 
H-!BH = diag (H, eee. и.) А 

将 可 推出 A 、B 可 换 ， 即 
АВ = ВА, (1,4,16) 
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进一步 ， 可 得 下 列 定理 。 
定理 1.4.1 ESEA, B ЗАНУ, А 
和 
证 明 ”只 证 条 件 的 必要 性 
人 
H-1AH = diag (A), +, ы), АН = Hdiag (д, ss hn)s 
记 
diag (дз, =, An) = Шав (Al. A l... Akpa)’ 
Н = (hP, a KLAE, e, RE, a. hu, h), _ 
ПА 5 ERARE pak HEB ВО, (1.1.17) (BH 的 
А,» А, 视 为 相 异 的 ， 而 ho 则 表示 为 的 对 应 于 第 二 个 相 
异 特征 值 的 第 了 个 线 往 天 闫 的 特征 向 量 。 册 于 
ABH = BHdiag (A) L... =, A.1,,) 
HJ HL 4 h S: АРД ИШЕГЕН, Bh EE ARREK 量 ， 可 AH: 
BR 将 属于 h. o, hii 张 成 的 空间 ， 存 


BAG = = ај ву, (1,4.18) 


{(1,4,17; 


ка К=],я#»,!,, 

5 BH = Hdiagg (X,, +, X,); (i, 4,18) 
其 中 X (aii) 是 《ld4.18) AWR RAE. ETBE SE 
ik H -!BH = diag (Xi, e, X.) 应 能 化 为 对 角 阵 ， 即 存在 非 奇 天 
阵 PiG=l 9 使 

PXP! = Д, G =l, 8) 
其 中 А; 为 对 角 阵 ， 阶 数 为 G=], s $ 
Р=діа (Р, =<, P), 
bli] (НР) B (HP) = diag (Ap =s A) X 
| (НР) -:АНР = Pidiag (hil, es. AT) P ` 
= diag (Ail, s rm, dd,,) а 
MSS FA 


nf AA, BHRR ЛЕДА И: HP. 
>4 А ЈЕ ДЕ, JE (1.1.7) POEM: 
ЖУЛ. 4.2 ААН, xE ERE В, 12 Ж 
— ЕЖ, ШЖ 
(А-А х0, е1, 6,1-1: 
{Н (А - Al) 'x = 0, ШХА ВХЛ РАТЕ 4 的 1 级 根 向 量 . 
а, ЕА Е ТЕТЕ АЕ А —— А ТАТА, ПЕЕ АУ 
Е 6 ЗА д а ЕАО R ГЕ 2 д ВУ. ВНР 
阵 的 非 奇异 性 可 知 ， 这 些 各 级 根 向 最 应 是 线 尾 无 关 的 。 
Н (1.4.3) 可 知 ， 在 矩阵 的 Jordan 标准 型 中 ， 同 一 个 特 
征 什 可 能 对 应 着 若干 个 Jordan 块 。 ЩА, en 是 4 的 相 异 特征 
[È r; 是 4 所 对 应 的 Jordan 块 中 的 阶 数 最 高 的 Jorian 块 的 
阶 ， 作 多 项 式 
P(A) = (А-А) ++ (А-А, *, (1,4,21) 


可 以 证 明 
PA = (A—A, D (А-А, 1) "= 0, (1.4.22) 
注意 ， 若 的 Jordan 标准 型 中 ， 对 应 蘑 个 特征 值 A, G <k=<s) 
的 Jordan 块 个 数 大 于 1 ， 此 时 对 局 -一 特征 值 的 独立 的 特征 向 
量 个 数 将 多 于 1 VA) 的 次 数 必 尝 小 于 矩阵 4 的 阶 An, R 
必 存 在 和 的 次 数 低 于 的 化 零 多 项 式 W(4)。 由 此 ， 我 们 给 出 
ЖЕМ. 
定义 1.4.5 如果 和 矩阵 态 对 应 某 一 特征 值 4 的 线性 无 关 的 
特征 向 量 多 于 1 时 ， 则 称 和 矩阵 是 减 次 的 ， 否 则 称 为 非 减 次 的 。 
亏损 与 减 次 、 非 亏损 与 非 减 次 是 两 个 独立 的 概念 ， 但 矩阵 
和 4 了 既 非 亏损 又 非 减 次 的 充 要 条 件 应 是 ， 惩 阵 4 的 诸 特 征 值 均 相 
FE, 
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55 ”特征 值 扰 动 问题 


5.1 矩阵 特征 依 的 连续 相依 性 
其 特征 值 记 为 i 且 设 
А=А+є=В, (1.5.1) 
式 中 是 实 的 或 复 的 参数 ，B 是 元 素 依 模 不 大 于 1 的 矩阵 。 
所 请 短 阵 的 特征 值 扰 动 问 题 ， 就 是 要 对 14 外 的 上 滤 做 出 
尽 可 能 小 区 估计。 在 矩阵 计算 中 ， 由 于 初始 输入 的 矩阵 ， 往 往 
是 某 些 物理 量 在 仪器 的 量 测 精度 范围 内 的 测 得 的 结果 ， 或 是 计 
算 的 经 合作 处 理 后 的 结果 ， 它 与 真实 的 物理 模型 是 有 差别 的 。 
ТЕ (1.5.1) 中 ， 如 把 4 看 作 和 人 机 数据 ，A RFRA FE 3 
型 ， 则 еВ 便 是 它们 之 则 的 误 甘 或 扰动 。 可 见 讨 论 这 种 问题 是 
具有 普遍 意义 的 ， 
由 于 息 和 的 特征 值 通常 各 有 nw 个， 可 见 ，|44 一 让 不 仅 与 
£ 有 关 而 且 也 和 4、j 守 的 特征 值 的 排序 方法 有 关 ， 记 4 和 并 的 
特征 多 项 式 为 
f(A) = det (Al А) = А" +aA L+ ee +a, (1,5,2) 
Ple, А) = det(A — Д) = А" +ú (eA l+ +++ +a, (е) (1.5. 3) 
这 里 ;人 = 1 sn) Н, а, (6) (е1, enn) 是 8 的 次 数 
不 超过 i 的 多 项 式 ， 满 足 
lima; (e) =а, Gi =1,2, =, n) (1.5. 4) 
定理 1.5.1 HERRER o>, FENIR A = 0 #ü Ф(є, 
А) = ОВУ АЕ, ч ет, A 
Ap A < 028—-1)6, k= 1, s=, P (1,5,5) 
其 中 天、 到 分 别 是 了 04) =0 HIC (g, Aa) = 人 0 的 第 k 个 根 ，。 
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UEB iape A E fO) =0 的 依 侍 意 次 ЛЕ ЖЕНЕН ПЛ 
Ж, ЦАТ е 重 根 时 ， 则 在 j= 1，2,…sn 中 有 ?个 下 标 
ІДЕ "j, 使 4;, = Àk (s= l, =); 对 每 个 А,» DI А, Ж 中 心 以 5 为 
BER, TA Ce WRA NC 与 Ci Ң ЖШ. N 
Gi 与 Gj， E ШӘ: ШЖ Ке), TAREFA А, 
s., Д,, 使 : 

А, А, е, Aras À; 

中 的 每 一 个 数 除 4 外 者 与 其 前 一 个 相 邻 , А, 5 An С, 与 C; 是 
连通 的 。 于 是 诸 图 С, (к= 1 e 将 在 和 平面 上 组 成 有 限 个 
GZ mA) 互 不 连通 的 连通 域 ， JEX: Gis Gos tts Gue | 


RLI oHm 
Ие ИАА РИЧИ р, < 


У = max |2|, 1<к<т 


记 us y as, f= min (f,) 
ЕГА 1<ёЄ А 
由 于 
үре, 
PIEDA + >) (а, (су —a,) Аё; 
hk =O 
М ACT, h, ІА «У, Ж 
п— | 
|ф(е, 2 - ЈА) 15 > |а, (2) -а„||А|*. 
k "= 0 
Hao ЈЕ АЕ, МГ 6220, AE 1,220, || < 8, 
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Е) 
[Pte, A fA <депотах(1, y" 1), 
4 ALi ЈУ (петах (1, TD) HF, WoE, А) - ХКА) | <} 
О еке 
应 有 相同 个 数 的 零点 ;这样 ，1(D ，9(s; DERA MA, 
的 特征 值 可 按 下 列 次 序 编排 ж к O л 
任意 次 序 分 别 对 ] А), (в, УЛЕШ ЕРОШИШЕ ЛОВ 号 ， 
之 后 ， 再 对 下 一 个 Q RRAHURAT AS DERS 简 
化 ， 重 编 以 后 的 次 序 ， 仍 记 为 : А» Аз, tes An Mi w ДИА 
ER 15<4k=<n, ША, MARETE +C. HIO) ÆG, H 
FREDO 1EM, со, AH A, 是 C, 中 某 个 图 的 圆心 ， 如 果 
А, 记 在 六 的 圆心 是 通过 :个 图 而 与 4; 连通 起 来 的 ， 于 是 
| 
<+ 2 s- Doin- 1)0, 


由 于 o ЕШ, ПОЛ ПГ т Җа ВО 


lim A; (£) = А (i= 1,2, •+•, №) (1. 5, 6) 
s— 0 
或 
[A (e) - Aj =0 Gelo G= 1,1, ny; (1,5,7) 


Жир >0, ПШ Ap ss Ans А (0), =, А, (ey 各 对 应 于 A、 及 + EB 
的 特征 信和 基 一 排序 方法 。 

定义 1.5.1 Ж (1.5.7) rE, 4 p1 Bf, ЖӨБ ТАРО? 
征 仿 问题 在 А; 处 是 良 恋 的 ， 和 否则 称 为 病态 的 。 

1.5.17 设 Á 1 
Е 
А, 
ДРЕ ВАХТЕ (n, 1) 2239421, HRDP ШОК: Hi 
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det (JI - A - eB) = (1 — A)" + (— 1) "ë = 0, 
得 [X= ei, 
即 p= 志 (<1)， 么 的 特征 值 问题 是 病态 的 。 
5.2 Gerschgorin 定理 
为 了 对 和 矩阵 特征 值 的 性 态 问题 做 进一步 的 研究 ， 本 段 将 以 


Gerschgorin 圆 盘 定理 及 对 角 相 似 变 换 技术 为 工具 来 讨论 这 一 
问题 。 


iZ n 776 
47 di; ... q. 
G a see Qs, 
Жер” Sia P (1.5.8) 
Qal а, Qnn sy 
对 每 个 ISIS, R 
С; = {А -als 21 12,1| = pi} (1.5.9) 
jæ 


为 4 的 第 i 个 (Gerschgorin) 9, 8 а, 可 为 实数 或 复数 。 

定理 1.5.2 的 任意 一 个 特征 值 4 至 少 沙 在 4 的 一 个 贺 
盘 上 。 
证 明 设 x 是 4 的 对 应 于 4 的 特征 向 量 ， 且 设 其 依 模 最 大 
的 分 量 为 x;= l, H Ax = Ах А35 80610, 4 


DaX; = Àx, К= 1,2, 0,1 
j=l 


当 k=i 时 ， 和 
一 Qii = 之 ау» 


改 
li-a | У |@;;\. (1.5.10) 
j * i 


定理 1.5.3 设 4 的 ma 个 圆 征 中 ， 有 s АА CT ЖЕ 
。 22 。 


RIRS, BRRR и-5 “ИЛЯН 22, WAW п + 55 
ДЕ h, ЯТ НЖАТ 个 沙 在 Г. 

证 明 令 A=D+C， 其 中 DD 是 A 的 对 角 阵 ， 作 

А(е) = D + eÇ, 

Щщ e 由 0 ЖЕТ, AO 由 卫 变 到 4， 显 然 A(0) 的 特征 
值 就 是 也 的 对 角 元 ， 它 们 分 别 是 上 个 圆 盘 的 圆心 ， 其 中 和 有 5 个 
圆心 在 S Е, RFA ЖЕНКУ с, ВД, Ч е 
由 0 增加 到 1 BJ, Ае) 的 4 个 特征 值 将 在 1 平面 上 由 各 自 的 E 
ШИШ п 条 连续 曲线 ， 这 些 曲线 中 的 每 一 条 或 许 全 部 落 在 
5S 上， 或 许多 部落 在 其 余 的 ns 个 贺 章 的 和 和 集 上， 由 S 上 的 
s 个 圆 的 贺 心 出 发 的 特征 值 ， 在 0<]є<1Ю УФ ЕТЕ S F. 
而 此 种 特征 值 有 且 仅 有 s +. 

推论 1.5.1 设 和 4 有-- 个 圆 盘 C,， 它 孤立 于 其 余 的 圆 盘 , 旭 
A{es) 在 此 圆 盘 内 有 且 仅 有 一 个 特征 值 E), 34 Pla, 作为 i(e) 
的 近似 值 时 ， 误 差 将 不 超过 |s| 5) laal, BH 


1460) ~anl <e 2 loiil, (L511) 
下 面 我 们 将 利用 上 述 定理 和 推论 及 对 角 相 似 变 换 技 术 来 讨 
ШЕТЕН ТАЈНО ВЕ, 


ЖЖЖ, ЖА, EERE AR— SREE. А 
АВЕ Ж ШЕННЕ E. DHEER, 0—0 608 
上 4 是非 亏损 的 和 矩阵。 

我 们 的 问题 是 要 研究 和 4 的 带 扰动 的 矩阵 A = А + ЕВ 的 某 一 
特征 值 ite) 与 Ai 的 关系 ， 这 里 假定 当 g—-0 RJ ieh 此 
Fo BTERRAM H fE 

AH = Hdiag CAs s, А,), (1.5,12) 


其 中 ath (122), FE 
. 23 * 


НА + еВ)Н = diag th,, Ау е, А.) +EH IBH 
Bys Вузу e Ва 


| В.,/5 В: р 78% “лэ Bans Sy ` 
А, РЕМ | (1.5.13) 


Bias, B. /S, ee Вава 7. 
这 里 ， и ИП 
= (X, s, X.), NX =1 (1<і<и), 
ол оо ы (1«<ї=йп), (1.5.14) 
5;=у]х550, і= 1, e,n, 
уТх,= 0, i=j; 


Bi = уТВх;, i, |= 1, 5.660, (1.5.15) 
ШТ АА, (ї=2,+е,п), С (1,5,13) 右 端 的 第 1 个 EBI 
盘 ， 当 e 充分 小 时 ， 必 将 孤立 于 其 余 的 贺 套 ， 此 时 着 以 
14 (у= А+ ёВү/5, (1.5.16) 
作为 А + еВ 的 一 个 近似 特征 值 ， 则 误差 将 不 超过 
бе) = |е! D 18/5, = О(|г|), 


{пЗ АЕК. 00106, H DRD ЗЕТ 
右 乘 〈1.5,13》 的 两 端 ， 其 中 取 
Ю=д1аг(К/є,1,=,1), 

于 是 

D-H- (A + eB) HD 

8, fs, EB a/ KS, == ары Кг. 
I КВ, Гез, S, вв 8 wA и 

= diag (4,) + = Рау г š i " (1.5.17) 

"kB, Es, Brn2 Sa к Bae AS, ©ч 


Ж» ТАТУ i ЛУНАН Ж 2: 
9224, 


К ү 
第 1 个 Аджев (jks) 之 1815.3 
} 


ВТІМ А;+єбУ/8; IkB; /Ss:| + l: | s i 4 
АКМ Ж 1 BLACK: 立 竹 其 余 的 贺 盘 ， ия 
а-а (89) каала +| |в 
| &® | yi 


为 此 ， 可 先 取 k 使 шах |К8ц/з,| «віта - A: 
再 取 e 使 


| Pu. = ЕЙ 1) = | 
| ват) + а E lu 


1 а. а | 
зга =n: 
а {5% 


# (1.5.17), Æ Gerschgorin Н, !Ш{] 
[L (e) ~ G анон (1.5.18) 
ks. |í 


МААН EEB A Ж G 5 Ж BE FF, ZEA 
的 Jordan 标准 型 中 ， 对 应 于 其 余 的 特征 值 A (122) 将 有 阶 数 
大 于 1 的 Jordan 子 块 ， 此 时 ， 仿 照 上 述 的 讨论 过 程 ， 仍 可 得 
到 (1.5.18) 中 的 结果 ， 

>4 д ËJ Jordan 标准 型 路 ， 对 应 于 å, 的 Jordan 块 中 含有 阶 
数 大 于 | 的 块 时 ， 设 相应 的 最 总 阶 数 为 方 ， 此 了 时， 只 能 得 到 

[8) -hl =0O0 en) (1.5. 19) 
的 估计 ， 即 相应 的 特征 值 扰动 问题 是 病态 的 。 
А 25 . 


S6 特征 值 问题 的 条 件数 


6.1 谱 条 件数 
ЖАТТА RE А RIES ЖЕ. 
iz Ау, Азу ***у Àn 2) А ВАЕ x; Xy ++, Х„ НУН» 


全 标准 特征 阿 量 系 。 
Ах. = Дх, G=], sæ, P), (1.6.1) 
18 
H = (x, Х,,+е,Х„), (1,6,2) 
令 
НТ = (у,/$у, e. Yy Sp) s (1.6,3) 


其 证 ПУ =1, В. 
E 5; 0) (i=j); А 
Tx = Ни (1,6, 4) 
ý U (isj), 
设 L (e) JE А +В 的 一 个 特征 从 ДА + eB- АЕ яр PP БЕ, 
知 
НА + еВ ~ Д) Н = diag (д, – 1) +#H-1BH 
亦 应 是 奇异 阵 ， 当 А001, елор, ШР 
H '!(A+g8B - 1D H 
= diag(À,—- 4) П ~ e(diag (å; –4)) -1H*1BH) 
可 知 
'e(diag (А, – д) tH-!1BHi 21 (1,6, 5) 
НЖЖ НУО Ar, ШЕК КЕК F, Ж 
Геттах (|А; - | DPH НВ 1 


或 
тїп |4 — 1! «ЕНН, (1,6,6) 
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ЕЖА =l 也 是 成 立 的 ， 故 在 原 讨 论 中 关于 441 的 限制 可 
И. lG 

КЇН) = |Н IH], (1,6,7) 
РД 

|А;—}1+& є]К(Н)|!В|! (1, 6, 8) 
至 少 对 і Ну МЕУ. 

EE, EH LAH = diag (和 yj) 的 万 一 般 是 非 唯一 的 ， 

如 令 


K(4) = inf (x (H)), (1,6,9) 
|А; —5[=|е|к(А) (В|, (1.6.10) 


由 于 r) ШБЕК ҖЕ ХШ, HA КСА) 的 大 小 能 刻 
ЎА ВЕНИ ВЈ Е, В, BARKA) 为 4 的 对 特 
征 值 问题 来 说 的 谱 条 件数 。 

当 к(Ау 较 小 时 ， 人 大 们 有 时 也 把 4 的 特征 值 问 题 岂 倒是 良 
态 的 ， 而 把 相反 的 情形 叫做 是 病态 的 。 世 此 下 所 谓 的 生态 、 病 
态 与 本 章 第 5 节 定 义 的 良 杰 与 病态 的 概念 实际 上 是 有 区 别 的 ，。 
由 于 本 节 只 讨论 非 寺 损 阵 的 情形 ， 硬 非 亏损 阵 的 特征 值 问题 在 
第 5 节 中 均 应 算 作 是 良 太 的。 因此， 本 池 中 提 到 的 良 态 、 病 态 
概念 实际 是 上 一 节 中 的 良 坊 概 念 的 更 细致 的 区 分 ， 关 于 谱 条 仁 
数 &(4A) ， 可 以 证 明 它 是 有 以 下 一 些 简单 的 性 质 : 

(1) к‹А)>1, f (1.6.11) 

(2) 当 4 是 止 规 阵 时 ，x(4) =1. (1.6.12) 
岗 《1.6.8) 还 可 建立 类 似 于 定理 1.5.3 的 定理 。 

定理 1.6.1 如 果 圆 盘 

[4—4|&|&|к(А)|В|, i=1,2, 1, (1.6,13) 
中 有 个 圆 盘 的 和 和 集 组 成 与 其 余 n — s 个 圆 盘 互 不 连通 的 连通 成 
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S， 则 4+sB RIERA s ARESE. 
6.2 -条 件数 

щл Д4 АН A 的 单 重 特征 值 时 ， 据 (1.5.16) М 
(1.5,17) 知道 ， 当 以 


А1 CE) = А + еВ; зу (1.6,14) 
ТЕЗ А + еВ 的 一 个 特征 值 1.(e) 的 近似 值 时 ， 有 
A1(E) ~ А = 811/5 +O (22), (1.6.15) 


当 |si| 很 小 时 ， 上 式 表 明 相 应 的 特征 扰动 对 杆 矩 阵 元 素 的 扰 动 
将 是 十 分 敏感 的 。 握 此， 我 们 一 般 称 


1/8;si = 1,2, "e,r (1.6.16 
ЖА n- AAR. 5, 的 计算 可 依 (1,4,10) ~ (1, 4,12) 


的 公式 进行 。 

谱 条 件数 只 能 从 总 体 上 讨论 特征 扰动 的 敏感 性 而 不 能 按 特 
征 值 逐个 地 进行 讨 沦 ， 因 此 ，n- 条 件数 的 引信 意 在 补救 其 不 
足 之 处 。 
6.3 -条 件数 与 谱 条 件数 的 关系 

设 互 是 〈1.6.9)》 右 端 中 取得 准确 下 界 的 阵 ， 

x;= He/| Не, y = He /NH ?Tel, 

于 是 


sl = yf = ШЙ к= 
S aa a ЕК ШЕ 
{не;|\н-теду 2 кА) 
ВП 
д. КСА), = 1,2,5, (1.6.17) 
男 一 方面 ， 由 


Ho АН = diag (A, sery А.) ‚ 
H= 1676 setg х,) , H-T = (2 А =.) 
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16 
4 4 
D= diag (15.072, see, [$i 2), 
有 
(HD) 1A(HD) = diag (А, «+, 4,), 


据 
к(А) <|нр Нр) -NN <нр! (HD) ~!" p 


к } КАШАТ 
<( 2 = С, И Is; | Y=, 之 т ЕЈ (1,6. 18; 
综合 (1,6, E ЖІ (1.6.16), A 
`a L 
p <x(A < X |. (1.6.19) 


这 个 不 等 式 说 明 : 当 4 的 某 一 特征 值 属于 病态 时 ， 则 就 总 体 上 
来 阅 的 特征 值 问题 必 是 病态 的 ， 而 当 总 体 的 特征 值 问 题 属于 病 
术 时 ， 则 在 个 别 和 情况 下 的 特征 问题 中 至 少 有 一 个 是 病态 的 .. 
谱 条 件数 和 1n- 条 件数 还 有 一 个 重要 性 质 , 即 二 者 在 酉 相 做 
变换 下 是 不 变 的 。 | 
ШЕЕ ВЕ, И B=RARE, 3 HAH = diag (A), ++, Aa), 
ШИЖ (КН) -1B (RH) = diag (А, +, А,), |ü ВИД к, 
则 x 
K’ =inf(| (ЕН) -1;.1ЕН|,) 
= їп (ҮНС H'a) =к, (1.5.20) 
Ж Щх;, у; 表示 和 4 的 在 、 左 特征 向 量 ， 则 吾 的 右 、 左 特征 向 量 
=Rx, у'Т = еї(ЕН) 1 /|е,(КН) ,= УТКЕН 
于 是 
s? = Тк = уТКНЕх,= ух = 8;, (1.6.21) 


(i = ls д» ..., H) 
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$7” 实 对 称 答 阵 的 扰动 


7.1 实 对 称 扰 动 
实 对 称 阵 、Hermite 阵 及 三 规 阵 之 问 存 在 着 前 者 包含 于 后 
者 的 关系 ， 且 均 属于 非 专 损 的 矩阵 ， 它 们 的 特征 扰动 问题 必 有 
更 深入 的 结果 。 木 节 讨 论 实 对 称 阵 的 性 质 及 其 特征 扰动 问题 ， 
有 关 的 结论 常 可 推 之 于 后 面 的 两 类 甜 阵 ， 但 在 叙述 村 将 不 ~-- 一 : 
指出 。 
设 和 A 是 实 对 称 阵 ， 其 特征 值 为 4iCi=1,2,…,n)， 它 们 对 
应 的 右 的 和 左 的 标准 化 特征 向 量 设 芒 x Уз ЖОЕ А, Е 
相 异 ， 可 取 x = y, (1=1,+,п) 为 实 分 量 的 向 量 ， 于 是 有 
з;=у[х;= 1 (ї=1,+е,п), (1.7.1) 
因此 ， 实 对 称 阵 的 特征 值 扰动 问题 总 是 和 良 态 的 。 记 Ah(s) 为 
А+ЕВ 的 任意 一 个 特征 值 ， 仿 本 章 $6(1,6,1) ~ (1,6.8) 的 证 
明 ， 可 知 
(АС) ~4;1«[2||1В8|1< [2118 е] (1.7, 2) 
至 少 对 某 一 1= 1, 2, 66,0 рў, ВА +В 的 任意 一 个 特征 值 
必 将 落 在 其 一 个 以 4 Н nle ARKAE Е. н, 
可 以 导出 一 个 有 趣 的 结论 ,如果 А; 是 4 的 单 重 实 特 征 值 ， 则 
当 e 充分 小 时 ， 只 要 eB 是 实 的 但 不 一 定 对 称 ，4+esB 必 有 一 
个 靠近 4; 的 实 特征 值 。 | 
因为 4; 既是 实数 又 是 单 重 特征 值 ， 于 是 可 以 假设 4 有 一 
个 异 于 4; 又 最 靠近 4 的 特征 值 4;， 当 |ej < 之 1 和 ;一 4j1/2n bf, 
АСЕ) ж А +еВ НЕ ЛЕ [А-А <не ТОЛЕ, 4 
Кә, EH 
[А А (6) [А-А-А -А (ә []>п|є|. (1.7.3) 
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BH i ЛУД КУНАЖЫН, БРА (Е) 必 为 实数 ， 不 
然 ， 则 因 (e) 也 将 是 A+ eB КНН, НЕ i РЕЯ 
Е, ВЫ ГУЧ ЕЛВЕ А + еВ 的 -个 特征 值 的 推理 
矛 后 。 

此 处， 加 果 有 的 特征 个 均 相 异 ， 则 当 |e| 充 分 小 且 ев 为 实 
БЕВ, А+ еВ 的 特征 值 亦 将 全 是 实数 日 相 异 ， 些 时 和 +aB 应 
有 完全 的 特征 向 县 系 。 мв АТН Ш ЕРЕ» Ж; 
实 参数 е BUKU Ant, ийла {Л E.S: pa BE, Z Fi 
的 讨论 小 ， 我 们 将 把 ет, ЗВ <1 КШ 3: 掉 ， 而 
IRAE- - 般 的 问题 。 

7.2” 实 对 称 阵 的 和 的 特征 值 
МА. ВУК, ја 
СС-А 4 В, (1.7.4) 
下 面 分 两 种 情况 直行 讨论 ， 
7.2.1 C 是 对 角 加 边 的 实 对 称 阵 


Ге: ar 
|, оне осе оте сераво рве (Ñ (1.7.5) 


a: diag (а), 
定义 1.7.1 Z Xis Xaser, X, Ху, K Yi, sss, y, АЗЕ 
数 ， 当 


XIX DY, D eX, > Ya > Xut] (1,7,6) 
МЕ, ОХАН ЕЛКЕ М КЕ АУ. 3 (1.7.6) Ву” 


ЖЕ) #>” М, METEREN TERSA. 

定理 1.7.1 当 (1.7.5) 中 的 ai; 均 相 异 且 g 的 分 量 均 不 
З, ИС 的 特征 信 ， ADAD eD An tJ a 本 严格 的 意 
义 下 是 隔离 的 ， 

证 明 因 C 经 行列 交换 的 相似 变换 后 仍 具有 (1.7.5) 的 
形状 ， 且 特征 值 不 变 ， 故 可 设 (1,7,5) 中 的 & 满足 ; aa, 


se 3] • 


> >a, ШИС 的 特征 方程 为 
(а 一 A) 有 (a, - À) 一 ба ois Ü, 


f (4) = À + 3 @ 205 
则 аыл. 作为 
Q aa Yala, -a = a — |0) = 0. 
1.2, [К 
ЈА =1+ Da; (G, — А)?2>0, 


Qi «АСЯ» :=1,2,-, n — 2, 
方程 (1.7.9) 在 (Ga, а) 内 有 根 ， 记 为 Aris E 《一 9， 
а.) 和 (а, со) 的 概 记 为 和 和 和 1 则 和 hao 与 Qi， 
а, o 在 严格 的 意义 下 是 员 离 的 ， 即 АА з D> e >z, >, 


ft2) 


91.2 AIRES A 


(1,7.7) 


(1.7.8) 


(1.7.9) 


(1.7.10) 


ма, + diag (ау, ee, 0.) В); 重 特 征 值 时 ， 由 


@ >00 =a, ri >а; +, 


a 32 e 


可 见 
Ci hir 5A; = жб A: у= Ortis 

E А +, KAC RIT Ж ЖЕЛЕ, ШЕН], Ais +, An Бра, eres Aa TE 
HRE TERAN. 

当 & 的 某 些 分 晤 是 零 时 ， 则 与 之 同行 的 w; С BI ЖР ЙЕ 
18, а, 将 既 属 于 C 的 特征 值 数 组 ， 又 属 数组 cb tts Engs 
把 恕 中 这 些 ec; 所 车 的 行列 去 掉 ， 据 前 面 的 证 明知 ， 剩 下 НОЖ 
阵 的 特征 值 将 在 弱 的 意义 下 为 Чар (а;) BJ38| F BU BB 些 &; 所 隔 
离 。 而 在 弱 的 意义 下 互相 隔离 的 两 个 数组 中， 各 自分 别 揪 入 一 
ВЕН АТАЛ, PAARA РАНА. Р, Е а, 
是 否 相 蜡 ， 也 不 管 a 是否 有 海 分 景 ，C 的 特征 什 将 在 弱 的 意义 
下 为 gb ea, 所 隔离 ， | 

ща фа, АЖ, поема 变 到 a 时， 设 的 特征 值 
B A ЖЕНА, Hü AE e, ORR 80035 А; 和 а, 的 隔离 情况 是 
一 样 的 。 196, А 中 的 重 特征 值 与 А 中 的 更 特征 值 将 不 变化 . 
当 A. А; EREHE, НР 

ЈАК) -FAD = 大寺 ар (ai А1) — À, — аруа, — А) 
=а' —@, (1.7.11) 

有 

(А-А) (ë) =@' -а, А-А, = т, (а! —ay, (1.7.12) 
К R £, fE 1, Ë 21 Zi], О<т,= 17} E <1, 由 (1.7.7 
及 根 与 系数 的 关系 ， 得 

ХА, =а+ а, МА =а + Ха, 


故 


ХА; - МА, = e - a, 


从 而 
Dm = 1, (1.7.13) 
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由 (1.7.12) 和 (1.7.13) 可 知 对 角 加 边 矩阵 C 中 ， 当 发 
ЖАа=а' -4 的 改变 量 时 , 符 征 信 移 戒 的 方 名 与 48 的 方向 相同 ， 
且 特 征 值 的 总 变化 量 等 于 Ла, 
7.2.2 С- А +В, В Ж: 1 ЖЕ. 
因为 B 是 秩 1 的， 存在 正 交 阵 及 使 
| p: O ] 
В=К qos өе чатов Б’, (1.7.14) 
WEDT 
ТЕС=А+В Н R. R ERMAR, ju 
2 a?o 
RART = i | 


a : ио A 
这 里 4, 1: 是 4&-1 阶 的 实 对 称 阵 ， 得 
1G 二 户 ї а? 
СИА кое 
对 Ano 存在 4- 工 阶 实 正 交 阵 $ {р 
ЅА,. 157 = diag (@|,*++,@„_\), 


КСК? = 


作 


10 
О = А "us R 
025; 


И 
га+р : ьт ' 
ОСА +В) ОТ = жне вар отрене осе зәт qv у 
І . b : diag(a;) ; 
这 里 b= se， 上 式 右 端 已 化 为 对 和 角 加 边 的 实 对 称 阵 ， 由 于 4 和 
A +В ү EB BL 


人 
Í аве аво Фаз f оазвева еве 


i А AON 利 ваа да ава ра аза | 
с b I даро), b i dag(ci) ， 
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的 特征 值 ， 设 其 各 为 4; RA, E 0.7.12, A 
Al-i mP, 
Em, =] 0SM S1) 
ж, HT e Z BEIEREN LAKH: ЕВЕ 
的 扰动 阵 是 秩 1 的 对 称 阵 时 ， 则 特征 值 的 抗 动 与 扰动 阵 的 叭 一 
的 非 零 特征 值 同 号 ， 且 特征 信 扰 动 之 和 等 于 扰动 泗 的 特征 值 。 


(1.7.15) 


S8 Hermite 阵 的 极 值 手 质 


8.1 Hermite {И 
本 节 设 A 为 Hermite 阵 ， 其 特征 值 是 实数 : 


АРА, рее, Р” А, (1.8.1) 
ТЕ ТЕНЕ 
О = (ху, X," Ks) (1,8,2) 
使 
UĦAU = diag (А, +, An). (1.8.3) 


х, (= 1, esn жп ERREZE С" 的 一 组 标准 正 交 基 。 
对 任意 的 *EC ，x 可 以 分 别 表 为 


x=, +5,е, + ree +Ë, €. ғ 


(1.8. 4) 
Х=@Х|+@,Х, + 5 +@„Х„, 
4 хх = 1 В, 可 得 
xx= |E |+] E|? +s + [En]? 
= |а | + |a, :++ [lal?=1, (1. 8.52 
由 于 
f (x) =хпАх— У а, ;&,6;, (1,8,6) 
is) =1 


ai=Gi G, j=l, n), 
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Ят) С" 上 的 实 的 连续 这 再， 它 在 球面 


xH#x=1 (1.8.7) 
BRAT 
p = тах (x# Ax; 
Кре! 
т 
x" Ах = > А10: 2А, А, 
е. 
故 
D iS Ал» 
另外 ， 由 


ху Ах = Allel? = А, 
P> Ap 


Pi = max(x!“Ax) = 4, (1, 8, 8) 


1x4 =1 
当 对 x 不 仅 给 以 xsx= 1 的 约束 ， 而 且 给 以 x 和 = 0 的 约束 时 ， 
可 证 | 


тах (х"Ах) = A,. (1,8,9) 
(xl =1 
一 般 地 ， 可 证 : 
шах(х”Ах) = 4, (1<k+1=<mn), (1.8.10) 
Ix i= 
хіх =n 


E KAPRER, ЧЕ АУУ i +1 НИН Еу, 应 先知 
道 对 应 于 4 的 前 宇 个 特征 值 hiy…Ai 的 那些 特征 向 量 xo… 
xi 而 利用 下 西 的 过 论 则 可 避免 这 一 点 。 

今 考 虚 求 x" Ax 的 极 小 极 大 极 小 问题 : 
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min шах (x#Axw), (1.8, 11) 
Ра ixi =: 

РЁ ъд, Рид 

МЫ e Ë 


ZA P, P, HERWEN. AUS (xs x.) , Hi 
x=Uy, 0] (1.8.11) 化 为 
min max y'diag (Ai)y. 


Ç фур =! (1,8. 12) 
gHy т0, фа 
Те" 
这 里 
9; = ОЧР,, ї= 1,2,**, k, (1.8.13) 


Ву ЕА 1. 8,12), FE EAER (i= 1, 60 使 


min max ydiag (АУ = тах уНйїар(А,)У 
Qi Ixi =: Iyi- 


су =D, Ge) qhy=0, ПЕТ, 
iml, =$ i=l, É 
n . 2:5 
> тах у? бЧар(д”\у= тах BA N'i Arie 
ik tl 
Ey лавек) ту 15 
кув. джа q#y=n0 тек 
felek 1106.4 


жат E y WEDIR. 5) ) -方面 


min max yFdiag(¿,)y= шах y'idiag (А) y 


df Eyl=] УТ 1 
gjy = gaw ya 0 
i=1.,- K 11.55.0 


п 
— “Л I2.— 
= 2) А,|Л,! E Aes 


最 后 得 


min max ydiag (л) у= =А,.1, 
у yl =l 
了 了 一 Cr 四 
i=l esk 


min max XiAX= A,+ie 
з зми, (1.8.14) 


РВх- 0. Р: 


imle’ k 
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8.2 Hermite 阵 的 和 的 特征 值 
设 4、B、C 均 为 Hermite B£, а,, Bia У, 分 别 是 它 们 的 
按 非 增 次 郑 排 列 的 特征 值 ， 设 


С= А +В, 
HT 
У, = шіп max (х"Сх), 
Р; Iz} ~= 
Pa =o, Pamo (1.8.15) 
i=), k-1 


仍 设 UB AU = diag (а), 日 取 P; 属 于 U 的 前 Kk~1 列 ， 即 取 P;= 
Ue, ја х= Uy, IH (1.8.15) 
O = P#x = eTUHUy = егу, 


x Ax = уНііав(а)у = > 2111,10, 
i = 2 
故 


yi шах (х”Сх)<а,+Р\|, (] .8. 16》 
I x =: 
Р@ хо, Piwo 
f =1,- 4 ` 


ШЕ А=С+(-В), ШС, -В, АХЫ ЖА, В, С, Жр 
{1.8,16)0]1% 
Ga — Bus (1.8.17) 
iK 
e€, Ву РИ (1.8.18) 
ш B үк ЖаНа balse 时 ， 则 由 


一 和 8 <В, ZBI = HE 


ШЕ, 

i ашыш (1.8.19) 
AUG A а прн ЕЯ 

Sr 4 B., YES- 10, (1,8, 20) 


FERIEN T fi 2 n Et KARAER En- 197 
首 主子 味 的 特征 管 的 定理 。 
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定理 1.8.1 ША юп ИЗ, А... 是 它 的 =- ТИ 
主子 阵 ， 若 以 АА R Rin A ZA бб А. 分 别 表示 它 
PIRRE, RA A A ERREX FN. 
证 明 igt = діа (1, +, 1,0), 
XT = (Epee E = Т (0,6+,0,&„), 


ro: 

A= A: +  wwsasesnnq | 
тоз 

y Ga š (Fan 


考察 


min max x“ #Ах => тіп max 2 HA x = 4, 
Pe 1 xf 一 Ps Е Е! 
PRY' 0, Paso 人 
(wl, 5 = 1 


(1.8, 21; 
而 诺 端 又 可 窟 为 


min шах х”Ах2>тіп тах (xZAÀx) = À,;. 
Ра хі = Га lx B =i 


PSO Ружу РИА тора зо 
j= 5-1 Kasa 
едх =Ü 


РАР 
Е 1.8.21) Жтт, 436 х хр, HEREJES Т, БП 
ААда 
最 后 ， 有 
LERET MES (1,8,22) 


ИП А; 被 1 EDOR TARS, 
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1 2 A 0 Q ON /0 1 O` 
2 3 5! [ 00| ао | 
8 4 7) N1 0 0/, 0 D 0, 


f py, Sp Fk: RJ УЕ КЕЛП ЖЕКЕ FJ А, 

1.2 RACC" H ARRI, ОЧЕВА e€ C", vec" 使 
А =шо?, Ши, о ЩЕ i? 

1.3 ЖБ 


ВРЕ BORA AS iM in Ea, Hi A ХЗ ШШ 141 是 减 次 的 邮 ? 


1,4 È 


© 
2 
_ 
pe 


0 0 O 1 
TaI -@; -G, Riis 
问 4 可 党 有 形 如 x7-= (0, x, xy，x) 的 特征 向 量 ? 如其 有 形 如 #7 = (1, х, 
х, x) 的 等 征 向 量 ， 试 半 之 , 络 由 4 非 亏 扣 的 一 个 充分 条 件 。 
1.5 ЖУАУЗЛАТ А RRJ. ТЕНН E =I- 6uvH 的 det (Е) = 1 – vfu, 
1.6 用 Gerschgorin E FB DE Da pR 
И 91-2 15 


о 8 1 1 
== E: O 了 б 
1 0 0-1, 
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Жл. 


1, 了 设 BEC"* "Ж 适合 [> өы „(i= 1," FE), 
Жы 
ix 

试 证 det (B) 0, 

1.8 IERIE EERE Ps ДЕ A 


1 2 8 
ЕГ 4 1 
. \з 5 6 
的 特征 乙 的 分 布 情 况 . 
1.9 设 万 是 实 对 称 阵 ， 它 在 正 交 相似 变换 下 化 为 


f. .1.08 -0.3 0.1 | 
RTHR=| -0.3 0,87 -0.1 
0.1 .-0,1 7.23), 

试 估计 五 的 特征 伪 。. ки 
1.10 就 矩阵 

_: L 4 :311: 

H= 

у= 31 2 

BERRA. ` | 


1.11 设 AEC"" 且 A 的 各 列 是 互相 正 交 的 单位 商量 ， 证 明 тех. (Аш, 


u) ] 只 能 在 < < 是 对 应 于 人 的 依 米 最 大 的 和 全 信 的 特征 向 量 时 取得 。 
1.12 ”证明 任意 方 阵 可 既 由 本 碍 似 变 换 化 发 上 三 角 阵 。 77. 
1.13 证 明 同 时 是 西 阵 又 是 三 кке s HAARR 4 
TL 证 朋 词 时 是 正规 阵 又 是 三 钊 阵 的 矩阵 必定 是 对 角 阵 。 ' 
1.14 Ш РЄС""" (прот), Е m, каи – брест", 使 
HERH x€ R" ДЗ 

х= Pex + (x— Prx), 
其 中 Pr 是 F 的 列 的 组 合 ，(x 一 Pax) 与 了 的 任意 的 列 止 交 , 试 导出 Pr 的 
表达 式 。 
1.15 设 了 = Œp 是 上 三 s м? Е}, 可 以 适 当选 树 б EH >i 
时 ， 有 
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в:Е (6;,е, о) ТЕ (е;,є;,0) = 0, 
从 隔 证 明 对 任意 矩阵 A, ТИЕ X - Q, ВТ QF 是 初等 Heimite W 
的 洪 和 ， 下 是 形 如 蕊 (eepo) 的 初等 矩阵 的 乘积 ， 使 得 
Х-1АХ =diag (Rj, Ra +), 
其 让 每 个 Ri 是 三 角 阵 莫 其 对 角 元 是 彼此 相等 的 ， 
1.16 需 零 年 陈 内 能 有 等 特征 值 ， 容 等 矩阵 只 能 有 0 和 1 的 特征 值 ， 此 
ЖМ ЕГ Л ЯНЕ E yË A = AIRA =s AE, 
ХШ › д --125%, ЖО) AEF. 
1.17 ШАРЕНА о, MA v, JuKrylov ý] vj a, е 
“ЖЯ ЖЫ 
b... 1 = Au, (k = 1,2,6) 
满足 册 = Uo, ШУ = (01,00,00) WA 
AV = VT, 
1.18 ЖА, В. Jae nj ESE PER TRR SE]: 
(1) AB= BA, 
(2) PAJE TREX X-1AX,X -1BX 同 是 对 角 阵 . 


gt БАЮ ЕЗ 
1.19 用 两 种 方法 殿下 detl ` уш АВ, ВА 的 特征 多 项 式 除 


— À 秋风 于 外 是 相等 的 。 

1.20 1А, BIHI, ПЕНУ K0 满足 АХ = ХВ 的 充 要 条 件 是 

А — . -个 公 葵 的 特征 值 ， 氛 比 证 内 AX - XB = Сз 0 {л КУС 
AFE A.B ЖАННИ, 

1.21 AR A” 钓 迹 数 对 一 切 止 整数 b>0 NE, ША КУНА, 


АР RZ 
1.22 AZ A= J+ ene er, HIR 
“0 
1% 
J=: i 1 э 
| 0 | 
1 е, 
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ШЕН А 的 特征 信 为 О'е, ХЕ о=ехр(їл/п). 
1.23 w Ё=1—#еТ, fT = (fists Ín), 85 1 
ее А2 с АС! -ФОО` 


Be 
det(F— AD = 1 в. 


ү 1 0), 
REPA =A +I AU + + Ай TÍ, 
1,24 与 对 角 阵 可 搞 的 矩阵 的 一 般 形 式 是 什么 与 Jordan Her ph АЕ ЕА 
REREH? 
1,25 任意 实 矩 件 A 可 唯一 地 分 解 成 一 个 实 对 称 阵 B 和 -~ 个 实 反 对 称 和 泗 
C 之 和 ， 而 4 为 实 正规 阵 的 充 要 条 件 是 BB、C 可 换 ， 


参 ж + 


1. J. H. Wilkinson “The Algebraic Eigenvalue Problems", 
England. Oxford Univ, Press.1965. 

2, Alsion S. Householder “The Theory ој Matrices іп Numer- 
ical Analysis”, Blaisdell, New York. 1964. 

3, Joel N. Franklin. “Matrix Theory". Prentice, Inc., Engie- 
wood Cliffs, New Jorsey. 


• 43 • 


第 二 章 误差 分 析 


数值 代数 中 提供 的 数值 解法 ， 通 常 需要 在 高 速 电子 计算 机 
上 进行 。 代 数 四 则 运 千 通常 带 带 有 全 人 忆 去 ， 原 始 数据 也 可 能 
有 误差 ， 因 此 ， 求 得 的 代数 问题 的 解 往 往 是 近似 解 ， 近 似 解 的 
精度 不 但 与 问题 的 性 态 有 关 ， 而 且 与 算法 也 有 关 。 本 章 将 利用 
“ 间 后 误差 分 析 ” 的 方法 来 读 论 方程 组 的 性 态 问题 和 算法 稳定 
性 等 有 关 概 念 . 


$1 方程 组 的 性 态 和 算法 的 稳定 性 


1.1 方程 组 的 性 态 
用 数值 方法 解 具体 问题 时 ， 我 们 最 关心 的 问题 是 解 的 精度 
如 何 7 通过 实际 计算 ， 我 们 发 现 ， 解 的 精度 与 原始 数据 的 精 
度 ， 数 学 模型 和 算法 等 都 有 关系 。 下 面 从 数值 问题 的 … 般 概 从 
出 发 ， 逐 步 介绍 与 数值 问题 的 解 的 精度 有 关 的 内 容 。 
例 2, 1, 1 线性 方程 组 


1 10414 гхур pio’ 
Ке 
ОЕ БЕЙ ЛО ДОАО А: ху =х, 1,00, ЖЖ 
对 原始 数据 和 中 间 结 县 均 取 三 位 有 效 数 空 逢 用 部 分 主 元 素 法 求 


解 ， 得 到 
ху 50.00, Х:=1, 00 


利用 全 主 元 法 求解 ， 得 到 
X, =1100, Х.=1,00, 


a Д4 «+ 


{2.1.2 ©“ | 
1 10° 
„Пр 
如 果 对 元 素 取 于 位 有 效 数 字 ， 利 用 特征 多 项 式 求 其 特征 值 ， 得 


到 
А. = 101, Аз = = 99, 


ИБ, 30А Аара к pk Лл аср 到 

数值 结果 sES АСВ Ф, F 

Ф, 0-5, (2.1.11 
其 外 也 表示 原始 数据 了 的 集合 ，S 表示 数值 结果 S 的 集合 。 这 
里 ， 包括 数值 问题 的 描述 和 解法 等 双重 意义 ， 中 的 自 变量 d 
是 所 论 问题 的 原始 输入 数据 ， 而 Фф (9) (BH 5) 就 是 问题 的 解 。 
在 例 2.1.1 中 узе: жи 

¿ rü. 


1 1 2 
RITOS S=), 5|=Фф,‹4й), $, = b, (d) 表示 相应 问题 
的 方程 组 的 精确 解 ， 用 部 分 主 泡 素 法 求 得 的 解 和 用 人 儿 主 元 法 求 
得 的 解 。 此 时 


9999 , 0,00 
= a = : = ф d =| ] 
S = ф(а) 9999. › Si 144) е ‚ 
9999 
1.00 
| 
1.00 


将 某 个 问题 化 成 数值 问题 时 ， 我 们 往往 希 望 ， 所 求 的 解 
中 ( 鸭 存 在 而 且 唯 一 。 如 举 用 非 负 数 | (e+ ad) — b (0) |, Ж ЖЛЕ 
用 两 组 数据 ажа + sd ВНЕ ВЈ H 
(1) 存在 E>0， 合 对 所 有 满足 ldilu<as 的 6d， 解 中 (+69) 
均 存 在 而 且 叭 ~-; 
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(2) 当 ôd: p> iy, lbid +éd) -由 ->0， 则 称 该 问题 
对 给 定 的 数据 d EBE. HER eio +507 КАЕР А! 
S 上 的 某 种 范 数 , 条件 ‘2 ) 表 示 解 对 原始 数据 的 连续 依赖 性 ， 

如 果 问 题 的 解 多 于 一 个 ， 或 者 解 不 连续 依赖 于 原始 数据 ， 
寺 么 ， 应 腹 数值 方法 求解 时 ， 就 会 产生 求 得 的 解 是 否 可 信 的 问 
题 ， 因 此 ， 本 节 只 限于 讨论 二 定 的 问题 ， 

在 实际 问题 中 ， 我 们 往往 从 知道 原始 数据 的 近似 值 4， 对 
于 确定 的 g， -HAR AD), Ald- dlos, miled) – 
Ф(@)]5<<в, Жн, 可 以 估计 成 较 小 的 正 数 ， 我 们 就 称 该 计 算 
[|] йд “Ж” ну, Жр, wied 下 (9 上 很 大， 我 们 就 称 
该 计算 间 题 是 “病态 ”的 。 对 于 病 赤 问 题 ， 当 原始 数据 有 微小 的 
变化 时 ， 可 能 引起 数 什 结果 有 很 大 的 波动 。 这 时 关 要 求 数值 结 
果 法 到 某 种 精度 ， 就 必须 要 求 原 始 数据 具有 更 两 的 精度 才 行 ， 
有 时， 对 于 国定 的 和 某 和 运算 工 其 (如 电子 计算 机 )， 要 求 数 
值 结果 达到 措 定 的 精度 甚至 是 不 可 能 的 。 值 得 注意 的 是 ， 对 于 
同一 组 原始 数据 4， 关 于 不 同 的 g， 此 性 态 也 可 能 不 同 ， 

52.1.3 线性 方程 组 

3.000 4.1277 гх; 15.41 
l. И Ше и е 

有 解 x, =13,6658, x, = -6.2 

| „ш [3.000 4.2227 [х1] _ [15.41 | 
但 线性 方程 组 be | Р [йк тыңы 
没有 和 解 。 方 程 组 (2.1.2) 与 (2.1.3) 仅 在 系数 矩阵 的 元 素 (1,2) 
上 有 0.005 的 差异 ， 人 得 前 者 有 解 ， 后 者 却 没 有 解 。 这 是 由 于 方 
程 组 (2.1. 2) 是 “病态 ”所 引起 的 ,方程 组 的 病态 也 可 以 说 成 
系数 和 矩阵 关于 方程 组 求解 间 题 是 “ 产 态 ”的 ， 
12.1.4 Ж 
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-[ но 
1.000 1.374 
的 特征 值 是 1; = — 0.001, А, = 4, 375, ME 
Е | Í 
1.000 1.374 
RIFE XA  =0, А = 4.374. 
ЁЕ0]2.1.41, ЖА ЕВ ТЕ Ж (1,2) HEHA 0.005 
的 差异 ， 但 是 它们 所 式 得 的 特征 值 仅 有 0.001 59223], AXE 
于 和 矩阵 A 的 特征 值 问题 是 * 良 态 ” 和 的 这 两 个 例子 说 明了 间 题 
的 性 态 与 问题 的 描述 有 关 ,。 关 于 方程 组 的 性 态 问 题 ,在 国内 外 已 
有 很 多 研究 ， 近 华 来 ， 随 着 电子 计算 机 的 计算 可 度 和 存 迷 量 的 
提高 ， 不 少 原来 计算 中 疯 到 的 难题 已 得 到 了 解决 ”因此 ， 愈 来 
愈 多 的 人 对 研究 “病态 ”问题 发 生 了 兴趣 ， 基 且 取 得 了 不 少 研 
究 成 果 。 
本 节 着 重 研 究 线 性 方 往 组 的 性 访 ， 特 别 是 缀 讨论 如 伯 [ 从 数 
值 上 去 判定 线性 方程 弓 的 性 态 等 问题 ， 
首先 我 们 来 看 一 下 方程 红 (2.1.2) 。 根 据 高 等 代数 的 知 bi 
可 知 ， 线 性 方程 组 的 解 与 系数 行刑 式 密切 相关 。 该 方程 弓 的 潍 
数 行列 式 为 
_ 13,000 4.127 
231,000 1.374 
其 钨 对 值 较 小 。 那 么 ， 是 否 系 数 行列 式 的 络 对 值 小 ， 方 程 组 就 
是 病态 的 呢 ? FIG S S RM. 
例 2.1.5 线性 方程 组 
人 
0. 049x; + 0, 031х. = 0,117 
的 条 数 行列 式 为 


= — 0. 006, 


(2, 1. 4) 
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а (0.221 0. 054; 


一 = 0.004868, 
0,049 0. 034 


其 解 为 
XI 三 1T，xXaz=2。 
线性 方程 组 
0.221х, + 0. 059х› = 0. 329; 
А = 0,117 
的 解 为 


x, =0.93, х,=2,1 

从 例 2.1.5 可 以 看 出 ， 系 数 行列 式 的 绝对 什 小 ， 方 程 组 并 
不 一 定 病态 。 那 么 ， 用 什么 数值 来 “ 谋 量 ”方程 组 的 性 态 才 合 
理 呢 ? 方程 组 (2.1,2) 与 (2,1.4)， 刀 然 系数 行列 式 的 绝对 值 都 
较 小 ， 但 是 两 潜 却 有 很 大 不 同 ， 前 者 的 系数 矩阵 的 列 几 乎 线性 
相关 ， 市 后 者 却 没有 这 一 特点 。 方 程 组 (2.1,2) 可 以 改写 成 

3.000 4,127 15. 41 
е у щы. 

х, 和 xs 的 系数 及 常数 项 记 作 | Ша, a,, b, NDER 
(2,1,.2) 可 以 写成 


а, ,+@.Xx; = 


AEEA, a, ORAE Ba = -as= P b = 
16,7 la, || 
b Е PER ; 
qpr ОН: = lel = bl=1D， 组 成 新 方程 组 
а)у,+@у,= b, (2,1, 5) 
Нар, 
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俏 若 (2.1.5) ЙУ, У.Н, ЖУ 
b —a,y, = =5 27У; 
画 在 平面 坐标 系 D-xy 上 ， 如 网 2.1。 


[92,1 ЯА Е ТИ СД В да] 


其 中 CDy/es，OD 是 4O 的 延长 线 ， 改 有 
Ъ-а@,у,=а@‚,У\› 
从 而 方程 (2.1.5) 的 解 的 绝对 值 | АНУ, АВЕ DO 和 和 
从 网 2.1 中 可 以 清 乱 地 看 到 ， 当 el Жа, ILP РЕД 
‚ ва, па, йи, а, па, 稍 有 变动 ， 则 向 量 
ne eo tn 的 。 
上 面 我 们 从 直观 上 说 明了 系数 矩阵 的 列 向 量 的 线性 关系 与 
方程 组 的 性 态 有 着 密 团 的 关系 。 把 图 形 站 的 线性 关系 变 成 数 售 
关系 ， 从 而 去 判定 方程 组 的 性 态 ， 将 是 很 必要 的 。 


志 线 性 方程 组 为 
Ах = b, 


其 中 
А= (ageya ШАҢ і ЛУЈА, x= (XxX, 


ye X) Ts b= { @, MET РЕН на) НЯНЯ, Ба 
(mim. ee) 为 线性 相关 的 充 要 条 件 是 ， 该 向 量 系 的 Gram fj 
列 式 
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Са, ‚а,,+*+,а„=йе{(а,.а,) = 0, Gram {7 Жз ЛАШ Ж 


Уж. аж Ж (4, * 


KRR ED, EARRREHXR, ДИНА, ш, 

向 基 系 中 的 非 零 向 量 是 否 线 性 相关 与 它们 本 身 的 长 变 是 元 关 
的 ， 但 是 体积 的 大 小 双 与 向 量 的 长 度 有 关 。 为 了 使 Ga a, s, 
4.] 能 表明 疝 量 系 的 相关 程度 ， 凡 后 ， 我 们 可 以 将 加 量 系 中 的 


-ы- 


HERRE, fe [@;|[=1(1=1,2,+е., и), 4 
СГ2,,а,, PE: e, 
则 称 向 量 条 {&1, aas …, gr} 为 E -线性 相关 ， 
据 第 一 草 $3 的 知 训 ， 对 于 实 非 奇异 夭 阵 A= (apa3, 


АР tE IE ЗЕКЕ Q f 


А = QOR, 
нш 
Fi Fp Fin 
0 r ran 
R= , 
` CET] to 
i 0 S i Fan i 


ra>0 (= 1, 2, 1m, 而且 分 解 是 唯 :的 。 因 此 
АА = (ОК) (ОЮК) = ЕК, 
М fn 
GIA, , a, ++*,а„] = det (ATA) = (det(R))2 
реро га, 
на ви, MAr Si, 11,2, 66, пу 
р, = Мах (ғи, irag |. ө, [fnn ); 
р. = Мїп(|кү|, [reals бб, | Fnnl ), 


因此 ，p, 念 小 ， 向 量 系 愈 接近 相关 。 
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s. ag.) 


设 


定义 2.1.1 PKO) р 为 矩阵 4 的 一 阶 条 件数。 
当 p, Лай КСА) 很 大 时 ， 向 晤 系 就 接近 线性 相关 ， 并 称 广 
程 组 是 病态 的 。 

定义 2.1.1 中 记述 年 阵 和 的 一 阶 条 件数 入” (А) 与 数值 分 析 
中 定义 的 矩阵 A 的 条 件数 Сола (A) = А. АЛ B 然 形式 不 
同 ， 但 它们 却 是 从 不 同 角度 刻 划 了 线性 方程 组 的 性 态 ， 在 表达 
形式 和 使 用 方面 也 各 具 特 色 。 它 们 之 间 还 有 如 下 关系 : 

定理 2.1.1 КСА) НЕЕ А Йу ВЯ, Cond(A) 
= ПАШАТ азо Зе, ЖШ 


КСА) <Сопі(А) E20 IK (A), (2,1,6) 
这 个 定理 的 证 明 ， 可 以 参看 高 等 学 校 计算 数学 学 报 1979 年 第 一 
期 何 旭 祝 先 生 的 文章 。 


为 了 说 明天 ' (A) 的 大 小 能 间 刘 方程 给 的 性 态 ， 只 需 谤 明 
初始 数据 有 微小 变化 时 ,，K544) 的 大 小 对 方程 组 的 解 有 多 大 影 
响 就 行 了 。 根 据 定理 2, 1.1， 只 需 对 Cond(4) 进 行 这 样 的 说 朋 
即 可 。 为 此 ， 设 方程 组 Ax =b 中 , ARD OPARA oA 和 0b， 
从 而 解 有 误差 sx， 则 它们 之 问 有 如 下 关系 : 

定理 2.1.2 设 在 4x=b<sx0 中 ，4 是 非 青 异 阵 ， 且 

(4+6A) (x + óx) = b+ ób, 
ЖА 116А11<1, H 


[ахі 25 Cond (A) (r+ 四 )， (2,1,7) 


Ixl ~ 1-ҥСопд(А› 


Fa 16А 
lal ° 


证 明 由 (A+éA)(x+6x) =b+ ¿b 
. 51. 


可 得 

(А+ ЗА) бх = 66 — (GA) x, 
从 而 有 

A(I + A 'óA)óx = 60 – (64)x， (2.1.8) 

因为 

ЛА óA| SIAH oA <1, 
所 以 人 +A-I0A) -! 存 在 ， 于 是 由 (2, 1, 8) 得 到 

дх= (I+ ASA) 14-1068 —dA° x), 


故 
ПА: | 
lax <- ЛАЗЗАТ < obl + [18А 1111), 
вж ПА Hab] | 
А тА wA Се MAY), 
又 因为 
А 11а 2211511, 
所 以 
Jax] . ПАЧА leb| 18А] )， 
i Е ТА НАТА Wh ГА” 
Bp 
[62| Cond (А) |165 
р т Cond A) (r+- le 
推论 2.,1.1 在 定理 2. ], 2 中， 60 = 0, HHJ 
Іа. Te сон A) (2.1.9) 


ix] 17 Cond(A) 
如 果 дА = 0, MI] 
241 


xl «< Сопасд) Pl i (2.1.10) 
lii liði 


. 52» 


М.(2.1.7), (2.1.9), 2.1.10 可 以 看 到 ， 如果 сопі(д) 很 
大 , 那 来 ， 解 的 相对 误差 界 将 比 16417441 和 il6baii/lbl 大 很 多 ， 
有 可 能 使 方程 组 的 计算 解 与 精确 解 相 差 很 大 ， 即 原始 数据 有 有 较 
小 的 变化 上 时， 方程 组 的 解 可 能 有 很 大 的 变化 ， 也 就 是 方程 绍 可 
能 是 病态 的 ， 

关于 筷 阵 性 态 的 定量 的 研究 ， 还 在 继续 发 展 ， 怎 样 用 使 于 
估计 的 量 去 全 面 刻 划 线 性 方程 组 的 性 态 问 题 ， 引 起 了 不 少 人 的 
兴趣 ,目前 发 表 的 论 条 件数 的 各 种 定义 ， 正 是 反映 了 这 方面 的 
努力 。 
1,2 算法 的 稳定 性 概念 

数学 问题 在 求解 过 程 中 ， 往 往 舌 要 进行 成 和 于 上 万 次 的 运 
算 ， 由 于 舍 作 的 原因 ， 每 一 步 运 算 都 会 带 来 误差 ， 这 种 舍 人 人 误 
ЗНОВ ЖИТ ВАТЕ АОН ВЕТ 这 就 要 看 算法 的 “好 坏 * 了 .。 
在 数学 上 +， 街 量 算 靶 “好 坏 ” 的 主要 标志 之 一 是 着 算法 是 否 稳 
定 。 从 输入 数据 中 所 含 的 误差 对 解 的 精度 的 影响 以 及 从 输出 结 
虚 来 推测 输入 数据 中 的 误差 来 分 析 ， 有 两 种 稳定 性 的 定义 ， 即 
向 前 稳定 与 向 后 稳定 的 定义 值得 提出 来 ，。 

“向 前 稳定 ”是 从 “向 前 误差 分 析 ” 所 得 到 的 结果 来 衡量 
的 。 所 谓 向 前 误差 分 析 ， 是 指 对 每 一 步 这 算 ， 部 去 找 出 精确 什 
与 计算 值 之 间 的 误差 界 〈 此 时 ， 葵 人 数据 的 误差 界 被 认为 是 设 
定 的 )， 承 着 计算 过 程 的 向 前 推移 而 逐步 向 前 分 析 ， 直 到 得 H: 
最 后 计算 结果 与 精确 结果 之 关 的 误差 界 为 止 。 如 果 这 个 界限 比 
较 小 ， 或 者 在 所 “人 允许 ”的 范围 之 内 ， 我 们 就 称 这 个 算法 是 稳 
ER Emen, WUP “向 前 稳定 ”。 

四 前 误差 分 析 在 使 用 时 ， 册 于 精确 值 事先 不 知道 ， 每 球 计 
算 都 楼 估计 误差 限 ， 不 但 工作 量 大 ， 而 且 容 饭 产 生 过 估 现 象 ， 
因此 ， 使 用 疝 前 误 先 分 析 去 分 析 算 法 的 稳定 性 时 ， 历 史上 曾 出 
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现 过 对 某 些 算法 的 悲观 论调 。 在 很 长 一 段 时 间 内 ， 研 究 误差 分 
析 的 进展 不 大 ， 直 到 提出 * 向 后 误差 分 析 ” 之 后 ， 误 差 的 分 析 
研究 才 获 得 了 比较 金 面 的 进展 ， 

“向 后 稳定 ”是 由 向 后 误差 分 析 的 结果 来 判定 的 。 设 以 4 表 
示 某 数学 问题 的 输入 数据 ，dED， 用 ФФ) 表示 该 问题 的 精确 
解 ， 即 求解 的 每 一 步 中 的 中 间 结 录 都 是 精确 地 进行 的 ， 不 带 合 
人 误差 的 ， 而 以 4*(d) 表示 同一 问题 的 计算 解 ， 即 求解 的 每 一 
步 都 是 考虑 了 舍 信 误差 的 。 如 果 把 фа) 写成 Ф# (4) = ф(4) 的 
形式 ，4 ED， 并 且 4 与 4 的 差别 即 |4-4| 也 不 太 大 时 ， 我 们 
就 称 算法 中 * 关 于 D 是 稳定 的 。 可 以 把 a 看 成 是 d 的 带 有 误差 的 
输 人 数据 。 虫 于 原始 数据 一 般 总 有 误差 ， 因 此 ， 这 样 处 理 是 合 
于 实际 的 。 把 计算 过 程 的 误 羡 返 回 到 原始 数据 的 误差 ， 这 样 的 
误差 分 析 方 共通 常 称 为 向 后 误 盖 分 析 方 法 ， 如 果 算 法 经 这 样 的 
分 析 是 稳定 的 ， 则 称 之 为 是 向 后 稳定 的 ， | 

用 一 个 稳定 算法 去 解雇 态 问题 时 ， 由 于 计算 解 q* (d) 必须 
接近 某 个 精确 解 (4) ， 其 中 4 接近 于 d 。 又 由 于 问题 是 良 & 
В, алан, pd) 接近 $Cd)， 因 此 Ф* (4) 也 接近 于 
中 (G) 。 也 就 是 说 ， 用 一 个 稳定 算法 去 解 良 态 问题 时 ， 计 算 解 必 
定 接 近 于 精确 解 。 如 果 用 -- 个 稳定 算法 去 解 病 态 问 题 ， 那 末 ， 
由 于 2 接近 于 d hi, ODR ERF o, Mi 9e(d) 不 一 
定 接近 于 中 (d) ， 也 就 是 说 ， 稳 定 算法 解 病 态 问题 时 ， 得 到 的 计 
算 解 与 精确 解 可 能 差别 很 大 。 对 于 病态 问题 的 求解 ， 不 是 一 般 
稳定 算法 所 能 解决 的 ， 必 须要 用 特殊 的 算法 来 处 理 。 


$2 误差 分 析 


前 一 节 我 们 讨论 了 数学 问题 的 性 态 和 算法 的 稳定 性 ， 这 两 
个 癌 题 都 是 由 于 数据 或 运算 中 出 现 误差 而 引起 的 。 为 了 深入 地 
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讨论 这 些 问题 ， 必 须 进 行 误 凌 分 析 。 在 四 二 千代 以前， 几乎 没 
有 人 系统 池 身 究 过 这 个 问题 ， 直 到 四 十 年 代 中 期 ， 由 于 电子 证 
算 机 移出 现 ， 才 引起 大 们 的 巨大 兴趣 ， 开 始 的 一 些 分 析 ， 然 
而 ， 结 论 是 很 翡 观 的 。 例如， 认为 销 去 法 不 能 用 于 解 高 阶 方程 
组 问题 等 。 到 1947 年 Von Neumann 等 的 文章 才 澄 清 了 这 种 翡 
ЖАЗ). FA ASAT SMA 分 析 ” 的 思想 。 直 到 
1954 年 ，Givens 的 文章 才 明 确 了 “ 房 后 误 鞭 分析” 的 方法 。 在 
J. H. Wilkinson 写 的 《The Algebraic Eigenvalue Problem” 
一 书 中 ， 应 用 这 种 方法 系统 地 分 析 了 数值 代数 中 众多 的 具体 的 
算法 ， 得 到 相当 满意 的 结果 ， 电 于 篇 柱 ， 本 节 将 主要 使 用 问 且 
误差 分 析 的 方法 ， 对 代数 中 的 基本 运算 和 消去 法 进行 尝 点 误差 
分 析 。 
21 浮 点 基本 运算 的 误差 分 析 

对 于 浮 点 计算 的 各 种 模式 ， 我 们 不 能 一 一 介绍 ， 这 里 仪 膝 
用 一 种 规格 化 的 学 点 计数 系统 来 说 有 明 舍 入 误差 分 析 方 鞭 ， 

对 于 任何 实数 x， 通 和 都 可 找到 一 个 整数 a 及 一 个 小 数 b， 


使 
x= 2"。D。 (2,2,1) 
为 了 使 这 种 表示 形式 是 唯一 确定 的 ， 可 以 规定 
ханов), 3-16 <1, (2,2,2) 
х= 08|, @e=b=0, (2.2.3) 


数 b 通常 被 表示 成 二 进 制 形式 ， 它 可 以 是 有 限 位 的 也 可 以 是 无 
限 位 的 .在 电子 计算 机 上 通常 用 若 汪 位 二 进 制 数位 ,例如 用 t 位 
二 进 制 数位 表示 加， 当 二 的 二 进 制 数位 多 于 上 位 时 ， 就 要 在 
的 第 (t+ 1 位 上 进行 舍 人 ， 即 当 的 第 (t+J) 位 为 1 时 ， 战 在 
b 的 第 t+ 位 上 进 1， 同 时 把 5 的 从 {t+ 由) 位 以 后 的 数 电 挤 ， 而 
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ье + {у ЕМ, ИНИН G+ DARRA HA 
B tr ЕА, KER HRR Ж ЛОЙ, ПИК x ЛЫ 
ЖЕЛ ЕЛ ЖА. MARRALAR JÉ д. а хр 
5, b UREZ. mika у x 与 其 机 器 表示 的 值 可 能 并 不 精 
确 地 相等 ， WHARE, WDE БИА ÆRA AE “а А”, HH 1 
差 的 大 小 取决 于 t ЖЕНЫ. RE 


数 
Bra Ссл. е 数 


ІШ 1 


92.2 ЖЕРИН 
WAUA (x) KRZR x рд 16, WA F HOO 中 的 绝对 误 
3 e, 利 相对 误差 e, 应 满足 


flix) =х+ E, Jej 2 


0-1-1 


Нох) = х+х -这 =x(1+ М 
а ДОЯ 
Ее = Ee Rog 
下 面 我 们 过 论 算术 运算 的 舍 人 误差 ， 由 于 不 可 能 同时 妍 究 
所 有 的 计算 机 ， 在 此 假定 计算 机 的 累加 器 足 双 字 长 的 ， 即 可 以 
接受 双 字 长 的 数 。 
设 x，?2 为 规格 化 的 渗 点 数 ， 并 且 用 
П‹х+у), }К\х-у), fl(xx y), fl(x/y) 
分 别 表 示 进 行 浮 点 加 ， 减 ， 乘 ， 除 四 则 运算 后 的 结果 。 
2.1.1 加 法 (减法 ) 
设 х=2#0,, у=2"°0,, b >b, Ф fixy), 
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如 困 b, - Б, 7, уча, tigb, -~-D: 位 (将 移出 去 的 bi -b 
位 保留 在 累加 器 的 后 半 部 )， 使 2 与 xs 同 阶 ， 然 后 求 41 土 8， x 
22 -tt， 并 进行 规格 化 ， 对 前 t 位 进行 舍 入 (有 即 在 t+1 位 上 加 上 
“ 士 1”)， 最 后 再 调整 阶 码 。 其 中 只 有 一 步 合 人 。 设 最 后 结果 


заа, M 
Й(х+у) =хҖҗу-её,, о ае? 
fl x+ z 
= (х беш + —- S- Ta xy (1+е,), 
ОЕ, | анчы ре ш, 
EA |x+y| ksi | 25=a,] — 2%» 二 十 2 а 
于 是 可 以 写成 如 下 形式 
人 =(х+у)(1+‚), E, 
le] <2-' (b, >b,), КК 


4 b, <b, IF, (2,2,4) АЖЕ. (2.2.4) 表明 x 与 ?的 
计算 和 (或 差 ) 是 U+) 5y0 +e) 的 精确 和 (或 差 )， 这 里 
[2.|<2-'. 

2.1.2 WÉ 

Ж жх=2',а,, у=2"+а@, 3Kfl(xx y), 

首先 是 指数 相 加 ，b + bs， 人 然后 精确 求 出 cl 的 双 字 长 ， 
即 2t 位 的 结果 ， 再 规格 化 ， 调 整 阶 码 ， 最 后 将 2t 位 字 长 的 数 
金 人 成 1 位 。 хаух, ШЕЕ, ннан 
有 最 后 一 步 舍 人 。 设 其 结果 为 2%:@4， 则 


П(хху) =хху+а, |е <2#7!71, 


¿ e, A 
Пху) = (хх у){1+ 25) = хуже), 
| = [ед| р _ 


|е, 


= 


E 
[хху| [2а ~ 
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ЫЛЕ 
eo = (хху) (1+8), 


le, | 27, 
BJ x 5y HARE xG +E) 上 与》 或 x 与 y(1+8,) 或 
x(1+ 6) ya +e)? 的 精确 积 ， 其 中 |e,| <2-'。 这 三 种 形 
式 是 可 以 视 分 析 的 方便 而 任 选 的 ， 
例 2.2.1 设 x=20.0.101101 у=2!!+0,111101 Ж 
filx—y) mfia x y), 
Ñ (1) 因为 t=11i0 自 b, -b,=101-11=i0<110 
БЕ, =a -0 x2 KK=0.011110， 
将 ”5&=0,011110 规 格 化 得 到 0.111100.， 
对 0.111100 进行 含 人 后 得 a, = 0.111100, 
调整 阶 码 算得 最 后 结果 为 
flix- y) = 210.0), 111100 = (х-у) (1+ ,), 
共 中 |e, 2711, 
(2) 因为 ol ay = 0.101011001001， 
将 ai a 2 А рї 6 位 ， 得 到 а= 0.101011, 
2%*+ = 9101411 = 21000 он, 
所 以 
fl(x xy) = 2!°990,101011=(хху) (1+), 
AET 
2.1.5 除法 Р An з 
Ж fl(x/y), Я узо, AWER, = 
| № (х/у) = (х/у) (1 +e, 
аа (2,2,6) 
хі y 的 计算 商 是 x(1+e) 与 ?或 x 与 ?7Y(E+e) 的 精确 商 ， 
“+ 58 。 


(2.2.5) 


其 中 |e-| s27. 
综合 上 面 的 讨论 ， 如 果 有 局 6 表示 加 ， 减 ， 针 ， 除 四 则 运算 

中 的 任何 一 种 ， 则 有 下 列 统 一 的 表示 
| Jfl(x0y) = (xby) (1+), 


(2.2.7) 
|2,!<2-*. 
# i 
1+e sagpro 3krhle,| <27, 
nd 
1+г/ т реш = ]— E, +E} — +++ “eo, 
ВП 
Bf = =E, HEt Et, 
当 e, 很 小 时 ， 可 以 忽略 e, 的 高 次 项 ， 于 是 
Еўш= E, 
从 而 (2,2.7) 还 可 以 写成 如 下 适用 的 形式 
П (x0y) = (x6y) / (1+1), КР 
(2,2, 8) 


ler| s2, 

2.1.4 ЖЖЖ 

BE Xis xz "v, X, 均 为 标准 浮 点 数 ， 求 I(xXi + x, + += + xp) 

和 flu x x... ЖМ АЕ ААН, FAT R ЖОЙ {т & 
人， 然后 再 做 下 一 次 。 


(1) 连 加 
设 
í =], 
| S, = 305, +x) = (5; +x) (1+2,), 


| 5, = fl (s,-: + x,) кє (Sp HX (1+,), (2.2,9) 
| к= 3,4, +... 
| | Es] <2! (k=2, 3ye n), 
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则 有 
s, Efix +X,+ = +X.) ж xi (1 +T) +Х,(1+7},) 
| += х„(1 +7), 
pas 2 
| k=1,2, ++, 
证 明 将 (2,2.9) 中 的 5; 逐 项 代入 ， 可 得 


& =xX (1+1T,)+x,(1+ 1, Hat LAA), 


(2,2,10) 


其 中 
1+7=1+17, = (1+, HED (1 + е,), 
1+7„= (1+) (1 +е,.1) +E), 
К= 3,4, +e, n. 
从 而 有 


(LD 
由 于 (1 土 2 )* 的 形式 经 常 出 现 ， 所 以 引入 简化 条 件 。 设 
k+-2 !'<0.1 (2,2. 11) 
此 条 件 并 不 苛刻 ， 例 如 当 += 40, kato", 
由 于 | : 


(1+2-*')5<<1+Ek+2-! + 282 Е (271)? + e 
=1+k. 2 (i. Th 2) + ERED. (з, 


<1+К+.27 (i+, -= (0. теа (0.1)? ++) 


=] kezte eta - 1; <1 + (1,06)k.2 71. 
类 似 可 得 
(1-27*) #221 (1.06) 大 2 
令 (1.06227 =2-*, 
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FE- (1+27')5#<1+К+27", (1-27®К>1-К+2“ 
Ыы t,=t-—0.084 
所 以 (2。2.10) 的 第 2 式 可 写成 
1-(1,06%(п-К+1)27'<1 + T1,<1 + 
(1.06) (n—k+ 1)2 `, (2.2, 12) 
Jn ]< 00 tm- k+1)27 t= (n -Ю+1)27!, 
综 上 可 得 
A + = +X,) =X (1 + NY + ee 
1 +х„\1 +1), (2.2.13) 
í [|< (n—-k+1) 277” (ЕЁ=1,2,+#,ю), 
(2.2.10), (2.2. 13) 表明 , 连 加 的 计算 和 是 带 有 相对 误差 的 各 数 
x% (+ 四) 的 精确 和 ， 诸 相对 误差 限 的 大 小 ， 因 参加 运算 的 各 数 
的 先后 次 序 而 异 ， 其 先 参 加 运算 者 在 积 式 中 引起 的 误差 的 增长 
也 较 大 。 因 此 ， 末 和 时 应 先 安排 数值 较 小 的 数 参加 运算 ， 这 样 
做 ， 在 多 数 的 情况 下 能 取得 较 高 的 精度 。 
| (2) E% 
设 Px, 
Pa = Н (рх) == (рух) (1+Е,%. 


. 
- 
- 


Pa = (DX = (9, ix.) (1 二 ee， 
|s,| <2-t (k=2,3, +, n), 
则 有 
Da = JIK Xg X.) = ХХ, 56х,(1+е), 
ык шр о 
出 于 р, = х, ех, {L E) (1+ е3) ++ (1+&„), Н leals, 


Ф 


(2.2.141 


(1+,) (1+ 43) ee (1 + 8,) =1+е, 
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则 在 


(1—227!+)*1<]1+е<с(1+27')"7!, (2,2.15) 
其 上 、 下 界 与 连 加 不 -一样 ， 它 与 计算 次 序 无 关 。 
2.1.5 内 积 


设 х, y G= 1,2, 0, n) 均 为 浮 点 规格 化 的 数 ， 求 % = 
1 (хуу, + Xiys+…+ wy,)， 计算 次 序 是 先 求 出 两 两 乘积 的 单 
字 长 浮 点 数 ， 笛 依次 相 加 ， 直 到 求 出 最 后 结果 。 即 设 
ру =} (хуу) =S, 
p, =fl(x,y,), з,=]1(з|+р,), 


pe= П (х,у), S, = ][1(5,0 + р), 
k = 2,3, =, n, 
则 有 
{Sn= XV +61) + X;yz (1 +) + х,у, (1+ ,), 
| (1-2 2841 +a, S< (1+27')"-*°, (2.2.16) 
к= 1,2, "=, n, 
因为 раху, (l+), 0,527, 
S= (5,_, + р. (1 +f), |n,l<2-:, 
所 以 
Sn = XY l HE) + х,у, (LHE) + == х,у, (l+ P). 
其 中 
1+ë,= (1+4) (1 +fl,) == (1 +i.) , 
I1+#;= (1+2,) +N, (1+ 1,), 


1+&,= (1+ё&0(1+7,)+#(1+7„). 
k=3,4, б, 
从 而 
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‚ (1—22)! кеу (1+2 5), 
(0-27 2411 e s< (127978, (2.2.17) 
3 

(2.2.17) 还 可 统一 地 写成 - 

ео) арр (1+2!у*7#+ (2.2, 18) 
К= 1,2, >v, и, 
Wke Lol В, #02, 2.12) F 
1— (1.06) (n—-k+2)2 < 1+ 6,1 + (1.06) (8-6 +2)27', 

БП : 

|| <G(@-k+2)(1.06)2 != (n-k+2)2 P,  (2,2.19) 

其 中 1,210,084 由 此 得 到 

s кз 
+Х„у„(1+&„), (2,2,20) 
|Jal|<(m-k+2)2-!' k=1,2, =n, 

以 上 这 些 结果 为 算法 的 浮 点 误差 分 析 及 稳定 性 讨论 提供 了 良好 

的 基础 。 

2.2 消去 法 的 浮 点 误 关 分 析 | 
利用 前 面 的 浮 点 误差 分 析 的 基本 知识 ， 可 以 对 求解 线性 方 

程 组 的 消 元 法 进行 误差 分 村 ， 在 此 仅 对 列 主 元 素 法 进行 分 析 ， 

全 主 元 法 可 以 类 似 地 进行 。 | 
在 做 误差 分 析 时 ， 为 叙述 简单 起 见 ， 设 消 元 是 按 自 然 次 序 

进行 的 ， 即 每 次 消 元 时 不 需要 进行 行 的 交换 ， 撑 自然 次 序 选 取 

的 主 元 就 是 列 主 元 。 设 求解 的 线性 方程 组 为 

Ах =b, 

-首先 考虑 对 4 进行 ER 分 解 。 设 A= A''*"， 各 步 消 元 后 产生 

的 计算 和 输出 矩阵 依 次 为 А, А, ++, A= Ñ = (Ti) asas 

АЧУ. АЕ", TH 34 ]<К, >ik а} = 0, А‘ 
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Bi (k 1) 列 的 对 年 元 以 下 的 元 素 均 为 0 。 由 普通 消去 法 对 Am 
再 进行 一 步 消 元 后 得 A4+ O, Jagt 应 为 
0, i>k+1, j=k, 
ай =l [Иа тича), 21, J>k+1, (2.2,21) 


~、 P 其 他 ， 


其 中 т, =] (а/а?) i>k+1, 
由 于 
Mi, = Нара) = тз жец), [еи] 277. (22,22 
Р 4і2>к+1, КЕНЕС, O 处 的 元 素 的 精确 结果 应 为 
ай =а тац а? © Q rs al 
аш 


= —аРе,, | (2,2, 23) 
这 个 结果 一 般 不 为 零 ， 当 按 消 去 法 要 求 ， 强 使 该 处 的 输出 为 堆 
时 ， 和 需要 引信 一 个 平衡 的 误差 е 使 akin ано нер 0, 
此 时 应 有 
Eh = ait e. (2.2.24) 
ік +1, }:>>®+1 BJ 
ай = fl (aj та?) 
= [ap — mi aE (1 +e,;)1(1+;;), (2,2,25) 
[&;;]<<27', n; |<2-:, 
从 而 有 
вар тищ + Сар ею, ДИ? (1 +е,,) 11; 
таре 


= h); (k? arb (k) 

=) m a tipa тареш. (2.2.26) 
改写 (2.2.26) 为 

G= ab —т,а + ess (2.2.27) 
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其 中 


at т 
ер = Tn а таре, G, j>k+1), 
因为 (2. 2,21) 的 第 三 式 不 进行 运算 ， 所 以 没有 引进 误差 ， 即 
а-ар +е Р, eP = 0, (2.2.28) 
р А (9.2.24), (2.2.27). (2.2.28) 得 到 
гау -ma tep, i>k+1, i=k, 
ass аю ma te i>k+1, jæk+i, (2.2.29) 


| 
L + Р, 其他， 


其 中 
‚а Ein El €27, izk+1, j = k, 
GE enl <2 
eP = Ir T Ni; iG, Gijs 1 151 ШЕ“ 9 (9.2.30) 


| i>k+1, }>Е+1, 
\0， 其 他 。 
设 EW 是 以 a 四 为 元 素 的 误差 和 矩阵， 则 (2.2.29) 可 以 写成 


АЧ = А - М,А'# + Е'?, (2.2.31) 
其 中 
| x 
* ` 0 
Mas= i + М, O (2.2.32) 


ioe Maro Ü 

: : ` i 

0 Monk 0 | 
ыйкы ва 

А = А 一 МА“? + ES, 

А“? = А) 一 М „А“? +ЕФ?, 


A= A D Mp +Е'"С 1:2 
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两 边 求 和 ， 得 到 
А'? = At - IM: AC’ + DE”, (2. 2.33) 


注意 А 的 的 第 关外 ee Pi 的 第 EK 行 元 素 是 一 样 的 。 
而 从 〈2. 2.32) XITLA H, MAY 内 与 A" ЮЖ k 行 元 素 有 有 


>x, ВЖ 
М.А‘ = M.A = М, Е, 


于 是 (2.2.33) 可 写成 
п- 1 n-1 
B= А‘ – í УМ) + ЭТЕ"; 
í; = 1 i= 1 
经 整理 得 
м- 1 
(М+М + tM DRAH DE”, (2.2.34) 
` iei 
5 | . 
М +М,+ + M1 +I= [= l)n 
Eli +E +e +E UCE, 


MH) | 
= А +Е, (2.2.35) 


其 中 这 是 单位 下 三 角 阵 ， 龟 是 上 三 骨 阵 。 从 而 我 们 得 到 了 A 的 
AiR Ep E AIER A + E 的 精确 的 LR 分 解 ， 
下 面 讨 论 王 的 元 素 的 大 小 ， 为 此 ， 首 先 需要 估计 五 的 元 素 
т т; Жа ПУ. 
ral sns 列 主 苑 消去 法 所 以 
la | a (ік +1), Hm буз ш, 0—77 
Im; 1, В, 


< 
p=max а |/ Aj xs (2.2.36) 
1.3» 
ИРЕНА Lsi 1, Кеп, HA 
laip | DA (2,2,37) 


+ 56 * 


及 |r| р A... 
жи ж ЕД ЕЕ ГК, D ЖЖ. ERARE о 的 值 做 
先 验 估计 ， 但 它 是 可 以 在 消 元 过 程 由 求 出 和 的。 有 J 了 ms 和 Qi 站 的 
界 只 后 ， 就 可 以 合计 er WAT. H (2.2.30 AB 1 式 有 
Га = [а е! SPLA 0277, 
ЁК +1, ј= К, 


由 (2.2.30) 的 第 2 式 ， 得 到 


aton, | 
BE 一 
| É) | I+ T; ГА ТРАТ il Í 


лы Ы 


|1 + ;i 
i 


-+ im,i la [е3] 
+0||А!|„,2^! 


š 1 
гд. 978 f — +E — 
| НМ 2 ( ПИРИ. +1). 
由 于 | 
Жы. =] 十 2 1 
1 — 2 
所 以 
1, ik+1, j=k, 
|р ОҚА 1.0279 2+2°', їе, }>®+1, (2,2,38) 
0. Fb. 
于 是 得 | 
кяр 
j 0 : Ü 0 ... 0 i 


i і 
(Y55066 00t0oto ESTEET EEEE ETE E: E Ea EE < ] 


IEP] ср! А, 27! 


Í 1 2227 2+2-';( 第 K+1 行 ) 
ог Бр 
: 1 2427 2+27* 
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又 由 E= УЕ” 所 以 


бо 0 0 0 0 
I L. Q 6 2 2 | 
:| 
а а 4 4 
|E] <p All. 2 А | 
113; 5 +% 28-4 2љ-4. 


AY 3 5 w 2?п—-2) 


0 0 0 0 о: 
0 1 1 1 ко 
ТЕ. 2 з 3 3 


0 1 2 ++. п-2 п-2 | 
0 1 2 = n-2 n-1. 

ПЕН. = HEN ора „+27 {Г È (21-1 1] +2-! > i) 
PA 2 R2 t. n2/2) 
@|А|\,?,2—*1, 

定理 2.2.1 使 用 列 主 元 消去 法 时 ， 实 际 计 算出 来 的 三 角 

因子 工 和 有 满足 

LE = A+E, (2.2.39) 
[Е!!„<спёо||А||„271*1, (2,2, 40) 
这 个 重要 结果 表明 ， 对 和 的 实际 计算 所 得 到 的 三 角 分 解 ， 可 以 
看 作 是 4+E 的 精确 的 三 角 分 解 。 对 于 一 般 和 矩阵 ， 如 果 2 不 是 
很 大 ， 那 未 ， 在 分 解 过 程 中 由 于 含 人 误差 而 引起 的 误差 矩阵 ， 

其 元 素 的 界 与 机 器 精度 几乎 是 间 阶 的 。 
完成 三 角 分 解 的 误差 分 析 以 后 ， 对 于 求解 方程 组 4Ax= bH 
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六 题 将 归结 为 求解 两 全 大角 方程 组 的 问题 ， 邵 


Ly=b 和 Ёх=у, (2,2,41) 
因此 ,要 完成 对 消 元 法 的 误差 分 析 , 首先 要 估计 求解 三 角 方 程 组 
UXx=b (2.2.42) 


ФА раз, ЖЖ®--М. 07200 БЕ8Е, Р (2,2, 42) 
可 以 写成 
(шах, = 0}, 
j за T to Xo =b, (2.2, 43) 


) w... asi. ia. 599 ОЕ ате фра 4.1... ..... чоо TT] 


| 
ГАЕТЕ aX, + + + WanXn = b,, 


依次 解 出 xl Хуур", Xas Н. (2.2, 8) 可 得 : 
х= АО ир) =b (и (1+), le) <27*, (2,2, 44) 
Р (авала ав. 
Ui: 
f! 了 一 了 XI 一 lI; X, — *°* — ix 1 ЕЁ) 
ui (] +í) 
= _И(С-йах,-и Хх» Жыт — is- 4X 1) +b, 
UCG HEDEN) . 


H (2.2.20), (2.2.19) 得 到 


x a Dad tEn) Hil + E12)X2 "ee tii 101 +E; Ола ый 
' и; (1 +е;) (1 +24) 
(2.2, 45) 
其 中 


И |&;;],|&й]<2 t, tss РЕА .... И, 
|s,,|<(i-1) (1, 06)27*, 1= 2,3,"*, Hy 


i lea С - 1) ke2) (1.06)27' (2.2, 46) 
| = (1+1 К) (1,06)27' 
` (1=2,3,,#+,п, k=2,3, ,i —1), 
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ЖЕГП 
Uill +E) = bs 
u; (1+1), +H 2 (1 + Ë. )X, + РТТ 
+U; O FE DXi H HE (1 +ед) х; = b,, 
¿l= 02,3, +, n, 
写成 年 阵 形式 (U +00) х= b, 
其 中 
иё 
РИ Uz2] #21022 
йай. Жа Е У, 
Oi1= Ep +ef +Е ЕД, = 1,2, ө, п, 
[в.е + Гед + lenefl <2.2 +27, (2,2, 48) 
ЕН (2,2, 46), (2, 2, 48) п] І 
IU |< (1, 06) 2 ' 


[нл] 
11021 21022. | 
"шү Alia! 2183] (2, 2, 49) 


] (љ- 1) [0,100 = 1) ua] 2]|u | Ру, 
ТТ бо 的 范 数 ;*，!。 得 到 
би} «1, 00220 5 i вахи 
Її = 1 Lk 
= Ear (1.06) "27 тах |ш,,'. (2,2, 50) 
定理 2.2.2 系数 年 阵 为 三 角 阵 的 线性 方程 组 Ох = b 的 计 
算 解 是 方程 组 (U +д)х= БЕ Tai, Мид, 满足 (2。2.。49) 1 
(2, 2,50). 
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将 这 个 定理 应 用 到 求解 三 前 方程 组 y=b 和 家 x=y， 最 
后 得 到 的 计算 解 应 满足 
(L +o) (R +6R)x =b 


或 (LR+oLR+i oR оГ дв) х=, 
ЖЕВ=-А+Е ҚА. Е, 48 : 
(A+E+oL R +L'6R +o- oR)x=b, (2,2,51) 
H (2,2,36), (2, 2, 37) 和 (2. 2. 50) 知 
(| „<=п, 
'[[R|I.<np А, (2, 2, 52) 
lar sa 2 2 
өй < 2-28 (1, 06) s 2 max ll |< P PL (1, 06)2^', 
í É 
у 2 
Ө 9 1.06). 2 'max|r,,] 
б.д 


2 
< (1.06)plA| e2, 


现 令 

дА=Е+дЇ,+ Б +1,8Ё +L oB, (2,2, 53) 
MJ IBASE] a + :oF ol Rio t+ [Eliela R ila 

+ 102.106... 
由 (2. 2. 40), (2,2, 52) 可 得 
‚ \А\„<1, 06mzplAl-2-(3+m+- 人 Dr。 

叉 因 为， 在 实际 计算 中 ， 常 有 (+ 12.2 /2<—<1, WE 

ІВА |..=1, 06 (и? + 40) p27 All 425.0, 54) 

定理 2.2.3 - 用 列 主 元 消去 法 求 出 的 线性 方程 组 Ах= b 的 
计算 解 * 是 方程 组 
(А +дА) х= 0 

К КЕ. Пора р дА 由 (2,2.53) 给 出 ， 且 满足 估计 式 
(2.2,54), 


从 定理 2.2, 3 的 证 明 过 程 中 ， 我 们 可 以 看 到 ， 由 (2, 2. 54) 
所 表示 的 误差 矩阵 的 范 数 的 上 界 估计 式 还 是 较 保 守 的 。 如 果 令 
了 =4+64， 则 定理 2. 2. 3 的 结 困 表 明 Ф* (А,Ь) = $(2,b), HE 
hot (A, bD 表示 4x=b 的 计算 解 ，$(4,b) 表示 Ax = b 的 精确 
BE, MEA |3- 4。<1.06(n3 +482)p 2 4。 只 要 1.06 
(nè + апо АВК Б, ВОАС ВА, 
ЯЖ, ИЖЕ Ф УААН ЕУР) 就 是 稳定 的 。 在 1.06 
(m+ 4пёур| All. 中 ， 需 要 进一步 分 析 的 是 Р 的 上 界 的 估计 问 
КЩ, 
出 于 
Га | < [0579 - mie |а| + la, "| 
<2тах |а}, 
从 而 有 
max jap | <2max |а" | < zmax |а "| < = 
<2" maxi d; |< 2TA 25 
因此 
бст» 2", m= тах |а|/ 1А (常数 )。 


从 而 P 有 一 个 与 矩阵 阶 数 有 关 的 上 界 ， 其 中 2" 是 一 个 变化 
相当 快 的 增长 因子 。 但 是 在 实践 中 很 少 达 到 这 个 界 ， 因 此 在 实 
践 中 解 线性 方程 组 的 列 主 元 素 法 被 认为 是 稳定 的 。 


2.5 解 的 精度 
定理 2.2.3 说 明了 非 奇 异 线性 方程 组 4x =b 的 计算 解 -x IE 
好 是 方程 组 N 


(А+дА)х= b 
的 精确 解 ， 并 且 给 出 了 误差 矩阵 64 的 界 为 
ISA] <. 05 (03 -402)D2-11 д], 
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WREEF) = 1,06 (n° + 4812)p， 这 是 一 个 依赖 于 具体 计算 细节 
的 量 ， 一 般 说 来 ， 其 值 不 会 很 大 ， 将 fa) 代 人 下 式 得 到 
ПВА. < (и) ТА. 2 (2,2, 55) 
由 定理 2,1,2 的 推论 知道 ， Ш x J : Ax = b 的 精确 解 ， H: 
ТАТ Ц.18А'11..<1, RE | 


\х-х„ < НА ба! 
AUE, =! 
ПА lel GAl 7 (и) lla 1.1241... 27 
= ў (n)cond (A)2 :<1 (2,2, 56) 
н, 就 有 
Ля -xil <. fGpeond(A)2"' (2,2,57) 


læn 1-70) сопі(А)27' * 


如 果 f (n) 8] сопа (А) АК, ЗН < fimeondiA)<2°, H 


Ix -xa 975% 


Eam 
从 而 我 们 可 以 期 望 用 +t 位 精度 求 得 的 计算 解 ， 能 达到 大 约 有 
к=? -了 位 有 效 数字 。 而 且 对 iixiis 有 如 下 的 估计 式 


< (2, 2, 58) 


TH ° 


„сед ууна J Jela 
(1 Сүн 9-Ё у хх. EETEHI (2,2,58) 


但 是 必须 注意 ， 如 果 条 件 (2. 2. 56) 不 满足 时 ， 我 们 就 不 能 肯定 
x 有 任何 精度 ， 而 且 (4 +54) 甚至 可 能 荐 奇异 的 。 由 于 对 
ГВА. 的 上 界 的 估计 是 非常 保守 的 ， 因 此 ， 利 用 (2. 2.57) 来 佑 
计 和 解 的 精确 度 时 难免 会 产生 过 俩 现象 ， 有 了 时候 这 种 过 佑 还 是 很 
严重 的 ， 
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由 于 f (mw) Яп cond(A) 均 有 可 能 进行 估计 ， 从 而 在 算得 % 以 
前 就 可 以 定 出 x 的 相对 误差 界 ， 即 先 验 误差 界 。 (2. 2. 57) 中 的 
误差 异 即 属于 先 验 误差 界 。 现 在 再 来 分 析 依赖 于 近似 解 x 本身 
的 误差 界 ， 即 通常 所 称 的 事后 误差 界 。 观 察 事 层 误差 界 的 一 个 
很 自然 的 方法 是 把 它 代 人 方程 组 Ax = pb， 然 后 再 看 残 向 量 

r=b -. Ах (2,2,80) 
范 数 的 大 小 。 对 于 x， 如 果 r = 0， 则 x 就 是 Ax =b 的 精确 解 。 然 
而 ， 是 否 !ri 较 小 时 ， 近 似 解 z 能 精确 衰 就 一 定 高 呢 ? 我 们 可 以 
从 下 面 的 定理 得 出 应 有 的 结论 。 

定理 2.2.4 设 和 A 是 非 奇异 阵 且 Ax = bae, x 是 已 知 的 近 
似 解 ，x 为 精确 解 ， 则 


lx -xi lri 
ти ои БЇ” (2,2,61) 
证 明 ”因为 r=b-Ax， 旦 A 非 奇异 ， 所 以 
A r= А7!$—-Х=х-Х, 
于 是 
|x -æl = Ае la Ui, (2,2,62) 
又 bi = [Ахд 2 
故 
[x zb A i (2,2,83) 
(2.2.62) 除 以 (2.2. 63) fF 
са ТАТАТ pe 
|x! [ol Аты: 
这 个 结果 表明 ， 解 的 精度 不 仅 依赖 于 残 向 量 的 模 ri 的 大 小 ， 
而 且 还 依赖 于 矩阵 的 条 件数 。 如 果 委 是 病 本 的 ， 即 使 成 向 量 的 
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模 jjril 很 小 ， 也 不 能 保证 近似 解 的 精度 很 高 ， 而 且 对 于 精度 高 
的 近似 解 也 可 能 有 大 的 [| 
82 2, 2 方程 组 
1.000 !,001угх,7 [2,001 
Бе чка ас у. 


的 精确 解 显然 是 x = (1, 1)7。 向 量 x= (2, 0)7 并 不 接近 x， 而 残 


向 量 
[ oo] К 000 I же | 2 ]- es 
2.0004 L1.000 1.000 儿 0 了 Lo 000 


却 很 小 。 此 例 说 朋 残 向 量 很 小 ， 但 近 做 解 的 精度 并 不 一 定 高 ， 


方程 组 
1.000 1.0011rx， 1 
ү осы 
的 精确 解 显 然 是 х= [ -1000,100017, {Н Jš mj (—1001, 
1000)7 虽 然 较 接 近 于 x， 相 应 的 残 向 量 
13 [1,000 1.00l4f-1001} pi 
кон raol a у. 
ЖЕФ ЖЖ. ЖИТАТА ИА ЛЕ BRAR ТШ, HERE 
不 - 定 很 小 。 

仁 么 原 内 下 起 方 权 组 病态 以 及 霸 样 辟 量 一 个 方程 组 是 否 病 
967 这 一 直 是 人 们 关心 的 “个 困难 的 课题 。Turing 在 1948 华 
第 一 个 使 用 了 “条 件数 ”这 个 术 滞 。 诬 着， 不 少数 学 工作 者 相 
继 提 出 用 条 件数 来 度 景 由 应 拔 阵 的 病态 的 程度 ， 但 是 对 条 件数 
的 大 小 的 估计 还 缺少 有 沽 的 方法 。Noble 1969 全 所 给 出 的 检查 
病态 条 件 的 各 和 方法 的 图 表 ， 使 用 起 米 仍 不 驶 理想 。 随 普 电 子 
计算 机 的 发 展 ， 解 病态 问题 也 变 得 傅 来 您 突出 ， 近 年 来 ， 除 解 
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РАЕН ЕГЕНОВ УК, НВ У ЯДА 
理 法 ， 这 是 一 种 较 有 发 展 前 途 的 方法 ， 但 是 目前 还 都 有 一 些 局 
Е. 因此， 判别 病态 问题 和 解 病态 问题 都 是 目前 计算 数学 的 
重要 课题 。 

关于 算法 的 误差 分 析 ， 经 Wilkinson 的 努力 ， 目 1957 年 取 
得 了 比较 大 的 进展 后 ， 直 到 目前 向 后 误 姜 分 析 还 是 分 析 舍 人 误 
差 的 最 完整 最 系统 的 方法 。 近 年 来 ， 它 的 概念 更 加 系统 ， 分 析 
过 程 趋 于 简化 ， 结 果 也 更 为 精确 而 实用 ， 


第 二 章 J 
2.1 证 明 方程 组 
^х+у=?2, 
1 хы у= 1. 
6 6 8 
ыХ+2у=3 


有 唯一 解 ， 但 是 它 不 运 定 。， 
2.2 i ACER" J n BERE, x= (X11;X2，…y XT, Haf xi 均 为 
ЖАН, К ж, ЖАСКА), ПСА). 
2.3 A BER” 其 中 qi 和 Di 均 为 规格 化 浮 点 数 ， 求 ЛСА В), 
JIA +В), 
2,4 设 Y，y，z 都 是 具有 上 个 数字 的 规格 化 浮 点 数 ， 用 例子 说 明 

ЛО + у) t 5ё&]1(х+ fy +2)), 

Лу z) = ПХ y2) 
是 否 一 定 成 立 ? 为 什么 ? 
2.5 fl ++ ху) (Д1 e X) + Хх) 

(K = 2,.…,1), 
证 明 Ла, +05 +. +0) = а (+01) + 
ta (IHP lI + 03 (1+ 03) 12+. +G (1 + D), 
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其 中 |0,|<и10-*, 1 是 与 1 同 阶 的 数 。 
2.6 设 x=39,25，y= 0.23， 试 将 x, y 分 别 化 成 +=6 的 规 桔 化 浮 点 数 
HIRR RER а= 2 a4 和 b= 25а, $RD, ME). 
2.7 设 二 次 方程 

х2 ~ 6,433X-+ 0.009474 = 0, 
试用 求 根 公式 计算 该 方程 的 最 小 根 的 计算 值 。 
2.8 举 出 “病态 "和 不 稳定 算法 的 数值 例子 各 一 个 ， 
2.9 ЕРЕ ИЕ ТЕАИ сливи Ax =b hj, f 
M P= max] ао /}А ЫЕ. 
2.10 АЗ АННЕ, КЕЗ, RJI(RTAR), НІ ЗЕ: 
在 某 种 范 数 下 的 上 界 。 
2.11 证 明定 理 2.1.1 即 证 明 КОСА) <cond(A)< n2: 
КСА). 
2,12 作 和 镜像 变换 的 误差 分 析 。 


з ж з 
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1.1 相似 变换 

用 矩阵 变换 方法 求 矩 阵 的 特征 人 入， 其 基本 思想 是 根据 相似 
算 阵 必 有 相同 的 特征 谱 这 一 性 质 ， 把 和 矩 咱 化 为 形式 简单 ВУ E 
阵 ， 使 新 矩阵 的 特征 值 便于 计算 。 上 三 角 阵 是 形式 简单 В 5 
阵 ， 且 其 对 角 元 就 是 它 的 特征 值 。 

如 果 只 {起 于 用 实数 进行 运算 ， 珊 未 ， 有 复 特征 值 的 实 矩 阵 
在 任何 祖 似 变换 下 都 不 能 化 为 上 三 角 阵 。 比 上 三 角 阵 范围 更 广 
且 特 征 值 又 有 易于 计算 的 一 类 形式 简单 的 计 阵 是 形 如 (3.1.1) 的 
被 称 为 所 于 三 角 了 的 矩阵， 


:x x 


Е" 
ХБ ЕРЕК =Й, САРАЕ EERTE, HRE 
2058, тА БАЕ 38 Z 8] — ERL, ХЕ 
-个 对 角 线 上 由 -- 阶 或 二 阶 块 纪 成 的 阵 。 而 矩阵 特征 值 就 是 这 
些 块 阵 的 特征 值 组 成 的 。 于 是 ， 求 给 定 和 矩阵 的 特征 值 问题 ， 就 
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可 归结 为 ， 把 给 定 和 矩阵 用 - 系 绚 相似 变换 化 为 上 三 角 阵 或 拟 上 
= ЕЕ. 
这 个 过 程 ， 通 常 是 不 能 在 有 限 步 内 结束 的 。 例 奸 ， 形 如 
=p рр чемер" 
к бу | 
F =. үп (3.1.2) 
| ss: 
的 所谓 Frobenious 阵 ， 其 特征 多 项 式 为 
Í (A) =A -pA + = +p.-1À + Pas 
当 #>5 时 ， 它 的 零 H, BU F BO 特征 值 、 一 般 是 不 能 用 pi(i= 
1，2，…，?8) 经 有 限 次 算术 运算 求 出 的 。 由 此 可 知 ， 使 P” FP 
化 为 (3.1.1) 的 P 也 不 能 由 p;(i=1,2,…,n) 经 有 限 次 运算 求 
得 。 
使 任意 实 和 矩阵 4 化 为 拟 三 角 阵 的 相似 变换 矩阵 是 否 存 芷 与 
这 个 变换 矩阵 是 否 可 经 由 有 限 步 运算 得 到 ， 这 是 两 个 不 同 的 问 
题 ， 后 省 已 予 说 明 ， 前 少 可 用 下 列 定 理 来 回答. 
定理 3,1,1 ША ЕЕ, ЕЕЕ АР АУЭ ВЕ Р, 
# PAP 031 E= fi. 
证 明 ”用 归纳 法 ， 当 34=1 冉 ， 定 理 显然 成 立 ， 设 3 n<k 
时 定理 也 成 立 。 则 当 %=k+1 时 ， 任 到 4 的 一 个 特征 8 A, ` 
和 是 实数 时 ， 可 设 其 相应 于 的 特征 向 量 为 x,， 晶 x 也 是 实 
的 ， 这 时 ， 可 以 找到 一 个 实 的 初等 Hermite ЖЕН, ЕР H E: 
实 的 正 交 阵 ， 使 
Н.х= Peil，j1p| = 1 xis0 (3.1.3) 
由 于 
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менү ay Я men ， 1 — i -一 一 


Wiwa Н, 左 乘 ， 并 注意 x= PHilel， 得 
Н,АН ге = ле, (3,1,4) 
и HAHI 具有 下 列 形状 ， 
A E a 
НАН! =| о д (3.1.5) 
RITAR VE, А, 是 阶 数 <k ОЕ, ЖЕТЕ ПЕ 2 EE H, WË 
H:A. HP 具有 (3。1.1) 的 形状 ， 取 
“рө ч 
і o |н, ВЫ (3,1,6) 
MU PAP JER. (3.1.1) К. Н РАЧЕ ВЕ, 
当 Н Н, ФА=а+18, х=ш+1їө, Wa, 8, и. о, 
都 是 实 的 ， 且 6%0, HH Ах = Ах, 得 
[ Ай = au – Во, 
[Av= Bu + ae, 
可 以 证 明 Ww、v 是 线性 无 关 的 。 ЖК, р. а 不 全 为 零 ， 而 
pu+gv=0, WIH (3.1.7), TE 


B( -pv +qw) = 0, 


(3,1,7) 


从 而 有 

' ри+Чче= 及 чи-ре=0, 
ШТ p+ 0, 3 и=о= 0, F. н. о 线性 无 关 。 这 
时 ， 可 以 找到 初等 正 交 阵 Н,, të 


Ty Fi 
| 0 Fz 
Fi、o)=| 0 0 ，rnrzz 关 0， (3.1,8) 
| : : 
х 0 0 
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й (3.1.0), 1 


ТРЕ БЕ (3.1.9) 
‚В g) | 
E 
ет + hi Eo 
HAH Ü "|21 0 ra [а Dor (3.1.10) 
TOIT An a 
„00; 00， 
比较 上 式 两 端 ， 知 HLAHi! 具有 下 列 形状 
aA В; | | 
нени 0 ІА, -> J (3.1.11? 


这 里 | 
i Fu regj Ву (ти mm y! 
psi А {в А Faz. | : 
可 见 A: 的 特征 值 仍 为 atib, H T A-: BJ Er R k- Y, HE 
纳 法 假设 ， 仿 前 面 的 讨论 ， 知 定理 对 =K+1 也 成 立 ， 
定理 3,1,1 ÀE. AA RIA EE KRE 向量 为 前 
提 ， 并 不 能 看 作 是 使 P-:A4P 成 为 拟 三 角 阵 的 了 的 存在 的 构造 
性 证 明 、 但 定理 本 身 却 为 P 的 构造 福 算 法 提供 了 理论 和 根据， 
1.2 上 只 算法 
设 实 矩 阵 和 A 有 三 角 分 解 
A=LR, | (3.1.12) 
Hh LESA FEA, RE EF = # BEz7 p S ЖУН, E 
L'AL J AB9— ЭНЖЕ, ig 
A= L'A, L; А; = A, (3.1.13) 
RAA=LR, J 
А; = RL, (3,1,14) 
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ERK LAE A ВО И АТЕВ Е А ИСЕ РОЗЕ ЯЯ, A 起 
ЖЕШ, PERIE А = А ЁЛ. КАТИ Е, Хон] 
得 到 A (ДЇК, ETEEN At A EREE Я 
AA, A.=LR, An SR Ls 
S=], 2, (3.1.15) 
KREA L. EP PPE ETR 者 是 证 三 角 阵 。 
HE, ЛТД АЕ А, EE үе А LR 分 
解 ， 例 如 
01 
7410. 
EIRA, BARRE LR 分 解 。 
当 4 非 奇异 时 ， 据 第 - - 竟 ， АЛЕ 分 解 的 充 要 条 件 应 是 
4 的 各 阶 首 主子 式 不 为 零 ， 在 此 条 件 下 分 解 将 是 唯一 的 。 本 节 
在 讨论 4 的 ER 分 解 时 ， 我 们 总 是 假定 4 及 其 LR 分 解 序列 中 
的 每 一 矩阵 А, 的 各 阶 首 主子 式 均 不 为 零 。 
设 14}，s= 1 2,… 是 4 的 LR 分 解 序列 ， 则 可 证 ; 


0 Á= 111 A,LI1 8 LI Lil,  (3.1.16) 
A Lise L,- i = Ltr L -jA | (3.1,17) 
记 E 
T,= LLL, U, =R В, (3.1.18) 
则 有 A: =T,U,, . (3.1.19) 
ARH Т.О, 是 Ai 的 LR 分 解 。 


1.5 ER 算法 的 收 黎 性 

H ASTU, 及 A HIRR, WA 的 三 角 分 解 应 是 只 
一 的 ， 记 区 7 为了, BBS (j). 元 素 ， 其 中 42=1，4892= 0， 
б>р, SAP 表示 АМИ) NEETA, A RR AS 中 把 . 
第 j 行 的 元 素 换 成 Ai 的 第 i 行 ( П>) HEMAT ЖЕЕ 
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j 阶 行列 式 ， 则 有 


tes =: АРАДУ (i>) Р 


‹3, 1,20) 


下 面 考 奋 4 在 什么 条 件 下 ， 其 LR РУТЕ. 


设 4A 有 依 模 不 相等 的 特征 信 , 
下 
对 应 的 特征 向 最 为 %1, %2，*…%,， 记 


“Хур Хур ** Xin | 


‚ Жо Ж); *** X 
` X = (xi) = 21 22 z" 


Ф - 
. 5 4 
. ”. % 


Xn Xn2 tes Xan, 


记 式 的 逆 阵 为 了 : | | 
s : І y" Уә t. Уа \ 
хубу ну) =! Ya Yoz '" Yan 


Ум Yn2 : Уз» t 


于 是 有 
A= Xdiag(hs "=, An) Y, 
A'= Xdiag(4}, =, ADY, 
及 
(А?) RET 之 2 , 
= 
A 的 了 阶 首 主子 式 为 
У ХУА, ХУА з te ХАУА : 
km1 Rl ki 
| Bl хуыд» ХХА, *** У) ХУА | 
Д” =. #—1 6-1 k= 1 i 


+ + s 
: : Н 
т т " 
7 1 
D Xp， 全 | Xa Ar, ** 之 ХУА к 
=i k=1 k- 


== X,Y, САЗ, RS А,) ы sss 


(3. 1. 21) 


(3.1. 22) 


(3.1. 23) 


(3.1. 24) 


(8.1. 25) 


这 里 Xn Y, УП АХ, УРИН, ЕНЕН 
ЖЕ; {Н BS Ji gë JE ñH 
Хь-ьї ike (Ако °**з Ayo) ' 
| <k Lkr Lre k,n 
T M Xai 表示 X 的 一 个 P 阶 子 式 ， 由 X 的 1 至 Pp 行 和 第 
koek У БАС Ў, Yas 是 了 的 一 个 了 阶 子 式 ， 由 了 
的 1 至 p 列 及 第 Ki， kz, e, kp 各 行 上 的 元 之 组 成 ， kis Кур, +, 
k, 是 1, 2 … 和 的 任意 一 个 元 素 个 数 为 了 的 子 集 , 当 Кү, ke. 
k, 分 别 是 1 少时， 简 记 为 X, 和 Ype = X Y, #0 Hj, (3,1. 
25) 右 端 中 的 第 一 项 将 是 4? 的 主要 部 分 。 
记 А> ЖХ ЈАВА M X, 中 的 第 了 行 换 为 A 和 
XH 行 后 所 成 的 行列 式 ， 则 
Д = ХЬ?Ү, (А, 996. Ap) ++", (3,1.26) 
T4 X,Y , 36 0 Bf, A 
XY, (Ar sss Ap)” оз 
X Yp lpt ЛЫ) 十 。 


(ry _ 
їр = 


Xp Аны 下 
= + 0[ —— 
- o( А, ) ， 1.2 


当 s 一 ce 时 ，ti%w 有 极限 ， 而 当 X,=0, Үе, X0 FF, 
ti? 将 是 发 散 的 。 

жЩ, DA РУЖ ТӨРЕН) LR 分 解 序 列 收 俩 的 定理 。 

定理 3.1.2 没 4 有 ZLR 分 解 ，4 的 特征 值 依 模 不 F, JF 
且 4 的 特征 向 量 所 成 的 敌阵 以 及 该 扎 阵 的 首 的 各 内 首 主子 式 不 
为 零 ， 则 A 的 LR 分 解 序列 必 收 敛 于 茶 一 上 三 角 阵 。 而 极限 矩 
阵 的 对 角 元 就 是 矩阵 AA 的 特征 舍 ， 

证 明 ”定理 的 条 件 保 证 了 ti (之 四 的 收 伍 性 , 但 (3, 1,27) 
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тЫ LR 分 解 中 的 下 三 角 阵 的 人 D) 元 素 ， 即 
T, 一 了 (3.1.28) 
这 里 T 是 xX 的 1 LR 分 解 X =TS 中 的 单位 下 三 角 阵 
A =T! AT,_1—*T 1AT 
-=Sdiagf1)S-1。 {3,1.29) 
上 式 右 端 是 以 1 А», tes js 为 对 角 的 上 三 角 阵 ， 
А, 是 对 称 正定 阵 时 ， 击 于 和 可 取 为 正 交 阵 ,有 Y = 
Х-!= X7， 可 得 
> 
及 {ыз ЛХ te Aas 9 “0 hi) 
bb s sa S (Аш, еее Aid) 
KE X s R Ха, 中 把 第 P 行 的 元 素 换 关 六 的 第 i 行 (i > 
P ) 的 元 素 后 序 成 的 行列 式 . 将 (3,1,30) 两 端 取 极限 ， 可 见 
当 зоор, УФ ЖЕ ЖОЛОН. jn 
Т,» T. (3.1.31) 
ЖІ Т.Ж Ет, (а А F= НЕЕ, mH (3.1.310 
сЕ ТУГ, ТӘТЕ) 


1.30) 


但 © 
А,=Т:МАТ,-у—>*Тъ! АТ (3.1.32) 


| | R, = LI A, >T AT v 
可 见 А, 5 R, ARWR HT R 是 上 三 角 阵 , 故 其 极限 也 
应 是 上 三 角 阵 ,并且 该 航 限 阵 的 对 角 元 应 是 原 矩 阵 4 的 特征 值 ， 


52 QR 算法 及 收敛 性 


2.1 QR 算法 的 基本 收敛 性 
H FAREN LR 分 解 中 ， 其 单位 下 三 角 阵 中 的 元 素 不 能 保 
证 依 模 小 于 1、 其 至 无 法 估计 出 这 些 元 素 模 的 上 界 ， 因 此 ，LR 
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算 兴 的 稳定 性 便 没 有 保证 ， 实 区 经 验证 明 ，、 在 这 种 算法 下 ， 计 
算 特征 值 时 精度 的 损失， 通常 并 不 是 但 然 的 现象 。1961 年 以 
Ж, Francis 对 此 法 进行 了 改进 ， 用 西 变换 作 工具 ， 用 QR 分 
RIE LR 分 解 而 发 展 起 来 的 QR 方法 ， 在 大 多 数 情况 下 被 证 
明 是 求 一 般 代数 特征 值 问题 的 最 有 效 的 方法 。 
令 A= А, 是 非 奇 异 实 阵 ， 则 A 和 可 表示 为 
А: = Q R, (3.2.1) 
其 中 Q, 是 正 交 阵 ，R1 是 上 三 角 阵 ， 当 规定 R, 的 对 角 元 是 非 
负 的 元 素 时 ， 此 种 分 解 将 是 叭 一 的 。 令 


A; =R,Q.,, (3.2, 2) 
易 证 Az 相似 于 А, RA 
A; = А, A, = Q,R., A1 = R,Q (3.2,3) 
s=1,2, .. 


这 里 每 个 О. MEERE, К, 仍 是 对 角 元 非 负 的 上 三 角 阵 ,不 
难 证明 


Å] = QH... QF A Q Q,, 3,2,4) 
QnQ A = A Q= Q... (3. 2. 5) 
令 
Q i Q, = Р,» Р.Р; = U.s 
则 
A! = P.U,。 (3.2.6) 
РФ ABJQR 2 8 РЕ ЭШЕГИМЕ УН, 先 考 察 一 个 例子 . 
例 3.2.1 $ 
её ү С 
А -| есі |, 
则 其 QR 分 解 序 列 可 表 为 
е e 2271116 | 


‚ 865 > 


这 里 ， 由 于 (1, 2) 元 素 在 s-=co 时 无 极限 ， 所 以 А, 在 授 常 的 
ЖУ КЕЛУ їй. ЖА, РА, 的 下 三 角 阵 收 鳅 于 对 角 4 
的 情况 ， 不 管 A, 的 严格 上 三 角 阵 有 无 极限 ， 只 要 相应 的 元 Ж 
保持 有 异 ， 且 把 相应 的 对 第 阵 当 作 А, 的 极限 ， 则 Ah, Е ЖД 
上 将 收效 于 此 允 角 阵 ， 在 本 章 后 面 的 讨论 di， 当 谈 到 年 阵 列 的 
极限 时 ， 我 们 赂 把 它 当 作 依 实质 收敛 来 理解 ， 

下 面 我 们 来 讨论 A 的 QR 分 解 序列 14 收敛 的 充分 条 件 ， 

定理 5.2,1 设 4 非 奇异 且 其 特征 值 依 模 不 等 : 


|> 1А >>> | 人 0 (3,2,7) 
Ш ЛЕГЕ БУОР X, Ч X BJP Y 有 LR 分 解 ， 即 
хет = L,U, (3,2.8) 


其 (A, 将 在 实质 上 收 误 于 依次 以 Ao Аз, '°*› An 为 对 角 元 的 L 
三 角 阵 ， 


证 明 Hi 
A= Xdiag (x +, AY = XAY, 
| А'=ХА*'Ү, А =фїаш(А,өд,), (3.2.9) 
代入 XX 的 QR 分 解 及 Y 的 LR 分 解 : 


X= OR,., Y = L,U,, (38, 2.10) 
则 
A? = Q,R, À °'LyU;, = QR (A'LA `°) (AU), 
ЯЛА АА ЕНЕ, ЕО J 3638 <i 


La lA AD ОСА (3.2.11, 
是 趋 于 零 的 ， 这 里 4; 是 L, 的 G, D 元 素 。 记 
ALA =T+B，BE. 0 ` (3, 2,12) 
则 А*= Q.R.(I+ Б) AU, ` 
: =0,(1+КЕ,Е,Е;')В, A U, 


记 


е” ШЕЛ 
D, = й P A= lA] 
е? К jan 
这 里 рй, À 是 对 角 元 非 负 的 对 角 阵 ， 类 似 地 , 记 
Uy= 0.0; I+R,E,R;! =0, R.. (3,2,13) 


这 里 D, EAHA, 07, НОЛЕ АО 7886, 0..8. Ж 
I + RERI H QR 分 解 ， 于 是 
A'= QO.0,.K,.R.Di A D;O , 
= Q.0,R.R.D:D, А 
= 0,0.0:р,&,в, АЮ». 
H TX НО ЕЖЕН, TES xF КЕЛТЕ xE G3EAB 
的 上 三 角 阵 ， 并 从 左边 提出 此 机 对 和 角 阵 时 ， 上 三 角 阵 中 的 对 角 
元 将 保持 不 变 ， 即 仍然 为 正 ， 故 上 式 中 Ran Re DENAI 为 
正和 的 上 三 角 阵 。 由 (3, 2.13) 91 0,. 8. 将 收 伍 于 单位 阵 ， 并 
E. б. ERATE. BA 的 QR 分 解 的 唯一 些 ， 应 有 4 = 
P,U, K ` 
P,=Q,0,D:ID,, U,= A, R. ÀD; (3.2,14) 
又 由 
= О, О, =Р,..0,, 
有 | | 
О, = Р;1,Р, = р;!01'"0;1.050.0,0р1р, 
= 01'*р;!0:10,р:р, 
=D "D; ! (+F,) DID; 
= (I+ DI Di DiD: 
= (I+ Ë )D >D.. (3,2,15) 
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REF, F. МНЕ Ó, 收 伍 寺 单位 阵 而 导出 的 政策 于 零 的 阵 。 
类 似 可 证 


故 
A, = Q.R,—D R. ARS = AT (3.2.16) 

这 里 了 是 对 角 元 为 工 的 上 三 角 阵 。 
2.2 等 模特 征 值 的 情形 

当 条 件 (3.2.7) 不 满足 时 ， 如 果 4 只 有 线性 初等 因子 ， 这 
АНУ QR 分 解 序列 的 收 敏 性 证 明 需 要 稍 加 修改 ， 得 到 的 结 论 
亦 将 有 一 些 差别 。 设 

[he = ТА > A> > | А„|>0 


(3.2.17) 
并 且 Y 了 也 有 LR 分 解 ， 此 时 ， 因 
A = ХАК, = XLA >) CAR,), 
Ж ALA 的 位 于 区 域 | 
tz:1>]>r <3,2, 18) 
中 的 元 素 为 
e: > 3 
ым = (й ГА; 81 um, 
人 《3。2.19) 


它们 的 绝对 竺 保持 为 151 Сејо), ПОВЕ s— oo 而 趋 于 
F, [EALA 的 在 上 述 区 域 之 外 属于 下 三 角 阵 的 不 在 对 第 线 
上 的 元 素 则 是 趋 子 零 的 ， 于 是 可 写 

A =X, +E) (CAR,). (3.2.20) 
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WH L Jika y F CUM, OA (3.2.18) 所 示 区 域 部 分 的 
元 素 柜 应 地 取 为 4 СААР H ЕЛ ЕНИ {Т HI, FE, MB E 
以 @G 为 极限 的 阵 。 记 


-0,0.К.0, на (3,2, 21) 
ЖЕ F,= D L; E, O; +0, 0.R, M: I+ F, BJ QR 分 解 ， H Е, 
O， 可 得 Q. RI, Е, X E X L, 28 r 列 到 第 t 列 不 同 
У, ЯЛАН, Хі, 的 第 + 列 到 第 { 列 分 别 是 X 的 第 r 
列 到 第 t 列 的 线性 组 合 ， 若 令 
| X =О,Е, 

А X BU QR h ë, HJH XL,= 0,0. E XL, =Q, R, o HF 

R, L, 具有 形状 

“x x 人 š 


М 人 人 人 人 
R.L, = с ая Y 
AA X 9 
х t 


其 中 画 “x ”的 元 素 与 R, 中 相应 的 元 素 相等 ， 画 “A 的 元 
素 则 是 R, 的 第 + 列 到 第 r 列 的 元 素 的 线性 组 合 
I R È, 的 QR 分 解 为 
R,L,= QPRP, 
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由 由 (3. 2, 22) 的 右 问 可知 ，@9 除 第 + 到 上 行 、 列 为 一 正 交 BE 
外 ， 其 余 与 单位 陆 相 同 ， 而 R9 r T ESTA 上行 下 方 各 
行 与 RF; 的 相应 的 各 行 一 致 ， 比 较 
Х?.=-0.0.= QOP RI, (3,2, 22) 
可 见 
0.= 9,07, Ü, = Е. 
0.50, 在 第 7 列 以 左 第 t 列 以 右 是 一 样 的 ，5, 的 第 r 至 第 
t 列 则 是 О. 的 第 r 至 第 t 列 的 组 合 ， 据 (3,2,231) 比 较 
A'=P.U,=0,0.R,U .4'R,, 
WA D'A, EHD RENAR, EEA A 中 的 本 对 和 角 
PE D' 往 左 移 ， 可 见 


Р,= 0.0.D', 
据 4,， = РЧА, Р, = Ф") бїднаА,6,0.р, 及 (3.2.22) 可 得 ， 
A, = (DI) OÙ L XA XLU 1.0.0‘, HT Ol, D, 是 


西 对 角 阵 ， n A 
G.L XA XED Ü. 
EE, XL, 的 第 r 列 以 左 和 第 上 列 以 右 应 是 А, YET à» 
"o А-1, Ais o А. ВЕЛЕ 8, ТЖ LP AXL, 有 
下 列 形状 


ГА, | 


БОХ ІА,ХЇ, 2. ‚ (3.2.23) 


БЕН Н) ЕЕ, DERRI F (3.2.2%) 
， 可 知 Ai 依 实质 收敛 于 形 如 (3.2.23) 的 惩 省 。 

有 具有 等 模特 征 代 的 矩阵 的 一 种 特殊 情况 是 , 甜 嘎 A 只 具有 
单 重 实 特征 值 和 单 重 共 轧 复 特征 值 。 Ш, А 的 QR 分 解 序列 
将 依 实质 收敛 于 前 述 的 氢 上 角 阵 。 当 和 矩阵 有 多 个 等 模特 征 值 分 
布 在 以 原点 为 贺 心 的 辣 心 图 央 . 上 时 、 洗 秆 信和 的 确定 将 不 如 前 面 
所 述 的 情况 直接 ， 这 种 困难 将 在 后 带子 以 克服 。 

定理 3. 2.1 6 Хожу 有 LR 分 解 这 个 条 件 也 可 以 去 
掉 ， 但 在 这 种 情况 下 ，QR 分 解 的 序列 的 极限 扬 阵 的 对 角 #9 上 
的 元 束 可 能 不 再 按 依 覃 递减 的 次 序 来 排列 。、 有 关 的 证 明 可 参 君 
J. H. Wilkinson 的 书 的 第 8 20531, 


$5 шш Г а 


3.1 带 位 移 的 окан 

кина са Жакы Эш, ла 
的 QR 分 解 序列 将 玫 敏 于 以 А, А s, „иал E = #8 
Е, A, 的 下 三 角 部 分 的 元 案 将 以 (4/ 和 7) (i> 让 ВЈ TF 
零 。 由 于 4 的 特征 值 与 4-pI 的 特征 信之 差 是 常数 p?， 而 A 一 pI 
的 QR 分 解 序列 的 下 三 角 部 分 的 元 素 将 以 (41-p)'/ (A; — p) 
ИО ИС F ë, 4 p АҢЫ ШЫ Т An Bts (А. р) A Ci - 
р) 收 敏 于 零 的 速度 就 特别 饼 。 如 果 我 们 有 一 个 确定 和 A 的 依 模 最 
小 的 特征 值 1 ВӘЛИ Е, ВП 


„йы, 


‚4. 


k> An s +00) (3.3.1) 

则 QR 分 解 过 程 必 将 得 到 加 速 。 作 
А, -КІ= Q.R., A,., =Е,О,+К (3.3. 2) 

5 = 1, 2, ... 
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PR (A,) 为 4 的 带 恢复 的 以 大 为 位 移 量 的 QR 分 解 ,可 以 证 明 
А. = R.Q.+k.I = ОЧА,О,, 
А1 = ФОЧА О, Q,, (3.3.3) 
Q О.А, FAQ Q,» (3,3. 4) 
QQ,- CAs- KEDR- R) | 
= (А, =k, (A, ~K iD (А, Кр. (3,3,5) 
又 当 适 当选 择 k, 村 ， 则 在 A P, EEn НОЯ Hi ЗИНА 
情况 ， 当 af? (т) 在 计算 精度 要 求 下 趋 近 于 零 时 , 便 可 将 ау, 
作为 4 的 一 个 近似 特征 信和 输出， 和 的 其 余 特 征 值 可 在 A, 的 降 维 
后 的 矩阵 中 去 寻找 ，。 
当 A 的 依 模 最 小 的 特征 值 是 实 的 县 是 单 重 的 时 ， k, = 
g) (S=1,2,>)., O 
X ABO ЖЕЕ ЈУРЕ Et EY SKRT, TK k, Ж :的 
右 下 角 的 二 阶 和 矩阵 : 


аса: а -.12 l 


ам ТИМ 
的 特征 值 ， 这 时 К, 可 能 是 复数 。 为 了 在 实际 上 使 用 复位 #5 而 
又 能 避免 复数 运算 ， 需 要 进一步 研究 QR 分 解 方法 ， 
3.2 ЕЯ 
设 К,, k; ERMENEK. fE 
A, —k,I=Q.R,. А: = RiQ, +tk,.I, (3.3.6) 
BEA Аз = RQ: +k, 
则 AEA ERA К,, k, 两 次 复位 移 后 所 得 的 矩阵 ， 当 A 是 
XE, RAQ, ka Оз, R, 都 是 复 阵 ， 但 因 
Аз = (О,О)”А,(О,О,). (3.3.7) 
0=0.0,, R= RRi, С3, 3, 8) 
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则 有 | 
ОК =0.0:К.К, = (А, -KD СА, - К.р 


= А: – (К, +k pA +k kI (3.3.9) 
上 式 的 右 端 是 实 阵 ， 它 的 QR 分 解 也 应 是 实 阵 ， 因 而 8@ 、R 世 
是 实 的 ， 由 (3.3.7), MT А; 也 是 实 的 ， 
3,3 Hessenberg 阵 
为 了 简化 计算 ， 我 们 证 明 下 述 定理 。 
定理 3.3.1 设 4 为 实 的 非 琳 异 阵 ，@ 是正 交 阵 , BÆR 
对 角 元 束 为 正 数 的 实 的 上 Hessenberg 阵 ， 则 在 等 式 
АО = ОВ (3.3.10) 
中 ， 当 人 @ 的 第 1 #J2ysERJ, О, B 将 由 (3.3,10) 唯 一 确定 ， 
证 明 设 C = (4,, sq.) RIESE, Aha, 是 已 知 的 ， 
bi; bi: на bi, 
| ba. baa тол b,, 


B = bas <“ by, |, (3.3.11) 
` А ; | 
\ 5..1 Bar 
比较 (3.3.10) 两 端的 第 一 列 ， 得 
АФ. =b,,q. +b, .q., (3.3.12) 
bi. =I A:s ba, = А9, 09,120, (3.3.13) 
9: = (Aq, —bi,g:)/b, >, b, 50, (3.3.14) 


继续 比较 (3。 3, 10) 两 端的 第 2, 3, ө, n 4, 并 仿 此 讨论 ， 
知 B、 只 均 被 唯一 确定 ， 
б=т Aqs (i= k, e,n), 
k 
Б, = Аа, – D bagi! >0, (3.3.15) 
k 
9+1 = (Ag, ~ 27 2,8) Рд. r. 


к= 1, 2, ... 4 也 一 上 。 
e 04 a 


注意 ， 该 定理 把 诸 bapi 00 2, en 1) 作为 条 件 ， 但 
此 条 件 是 否 成 立 应 在 (3.3.15) 的 递 推 计算 中 才能 发 现 ， 一 旦 在 
Ж H 0,,1..= 0 时 ,4;41 就 不 能 再 由 (3。3. 15) 确定 了 , 此 时 ， 
可 汉 ga: BIES g G= 1 k) 下 交 的 住 意 一 个 单位 向 量 、 递 
推 仍 可 继续 下 去 ， 代 @、8 的 准 一 -性 就 不 再 能 保证 了 ， 

EJE 5,5.2 BRAHE р тй, E Hessenberg р H A E E 
次 对 角 元 , 则 4 的 LR ОК УЙДЕ Л] A) 仍 为 上 Hessenberg 
Fe, JH A83E2 KOS G. 


证 明 i 
А-ТЕ ñf A= 00, (5.3.16) 
&i=ri:f 或 a Ugi, (3.3.17) 
由 于 mi 具有 有 形状: 
41 = (xy Xi 0, =, 0), (3.3.18) 


HEE, ФКА (3.3.18) 的 形状 ， 依 次 比较 (3.3,16) 的 
HRKI HEL, От) Е Hessenberg Е, HAJTE 2 5 
ЖН, ЕҤ] 

Аз= К 或 4 = 00 
KR. UÈLH, ТА А, iè k Hessenberg BE, |] 
БЕ Аз, +, An JE E. Hessenberg HE, 

H TEREPE 由 SHouseholder 相似 变换 化 为 -上 
Hessenberg 阵 ， 当 其 次 对 角 线 上 有 零 元 时 ， 此 种 年 阵 的 特征 
值 问 题 可 以 化 为 若干 个 低 阶 的 次 对 角 元 非 零 的 上 Hessenberg 阵 
的 特征 值 间 题 。 因 此 ,不 失 一 般 性 ,今后 我 们 将 只 讨论 次 对 角 元 
非 零 的 上 Hessenberg 阵 。 它 又 被 称 为 不 可 约 的 上 Hessenberg 
ВЕ. 由 于 Hessenberg KERI LR 或 ОВ 分 解 要 比 一 般 的 满 阵 的 分 
解 在 计算 上 省 得 多 ， 且 又 由 于 定理 3,3,2 ВЕН, ЯЕ 
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阵 的 特征 值 对 ， 总 是 先 把 给 定 和 矩阵 化 为 上 Hessenberg 阵 . 在 下 
面 的 讨论 中 ,我 们 将 始终 假定 A 是 不 可 约 的 上 Hessenberg E£, 
把 定理 3. 3. 1 用 到 带 两 步 共 谣 复 位 移 的 QR 分 解 ， 由 

í Аз= QHA, ,Q, Q= Q.,Q;, 
| А,О=0А‹у, (3.3, 19) 
AŬ = (3.3.20) 
th, 3412059281 列 为 @ 的 第 1 列 时 ， 则 让 上 式 确 定 的 5 O, BE 
ADAE RNA. 
H (3.3.9): ОК=А!—(К,+К;)А,+К,К,1, WHARF 1 
1], 得 


я, 


r q, = (A, - К.р (А, —k.,D ë, (3.3.21) 
上 式 右 端的 列 向 量 ， 在 4: 是 Hessenberg 阵 的 假定 下 只 有 三 个 
非 零 分 量 ， 即 前 三 个 分 量 ， 分 别 记 为 xl yi ZJ 
x, =a) +8103, -G,, (k, tk) +kik,;, 
У, =a, (G; +üG;, — Kk, -К,), (3.3, 22) 
Z, = 02103921 
于 是 
g= (Xis Yis Zi 0 0) /k, 
k= (X 十 3 二 2) 2, (3.3.23) 
5.4 Francise # 1 
有 了 9 之 后 ， 本 来 就 可 按照 〈3.3.12) ~ 03,3.15) 的 公式 
计算 (3.3.19) 中 的 @ 和 As 了。 但是， 按照 这 个 过 程 去 进行 计 
Ait, WRAP E Hessenberg 阵 4s 的 次 对 角 元 依 模 很 小 的 情 
况 ， 依 (3.3.15) 计算 出 的 pu 即 at fl 9 的 精度 便 很 低 ， 
这 将 直接 影响 @ 阵 的 正 交 性 。 因 此 ， 从 计算 稳定 性 看 ， 这 种 算 
法 是 不 可 取 的 。Francise 对 此 做 了 改进 ， 其 计算 过 程 可 以 归结 
为 : 求 (n 一 1) 个 Householder E£ P., 1, Pu-i ЖР, АЧА 1 列 为 
qz ÉE P... P., (k=1,2,- 8 的 第 1 列 也 保持 为 Yi， 得 


PË ee PIA, P,P (3.3.24) 
应 是 上 Hessenberg 阵 。 下 面 我 们 就 来 描述 这 些 矩 阵 的 构造 方 
E. 15 


P, = [— 2% ,У/Ї, (3.3.25) 

AFP RE 1 列 应 是 qi， 而 q 兵 有 前 三 个 分 量 不 为 零 ， 故 W， 
也 是 这 样 ， 令 

wi= v/v, ег C1, Pi, Fz, 0,.%0), (3.3.26) 


ө; |2 =1+41+92, Р, = - 20,07 /|®, |, 


2 2p 2 中 А 

ее реке о | eso po 0, =>. 01 

= Æ+ (Xi Ур zl 0 0) /k, (3.3.27) 

故 2 <= КУХ, (3.3.28) 


Jee к: 


为 使 上 式 中 的 分 子 不 致 相 消 ， 令 


k= віав (ху) (х? +y} +21) 1/2, (3.3.29) 
Q =у,/(К+х,), Ф, =2,/(К+х,), (3.3.30) 
2 ‚ | 
N = (k + Xx ,) /k; (3.3.31) 
ТЕР 具有 下 列 形状 
хох х У 
| x x x | 
охо x x 0 
КУ 
下 二 (3.3.32) 
б — ж 
; Б 


‚#7, 


这 是 一 个 三 阶 Householder 阵 与 一 个 单位 阵 的 直接 和 。 由 于 
P =P], i В; =Р,АР,, В, 具有 下 列 形状 : 


⁄ x x (окаса, кеа ЛЫ кажаа аза x ` 

| x x Xx x 

| x x Xx : 

х X X X . 

x x s= e үн 

B = А : $ (3.3.33) 

| ` 

I . 

| x x j 


其 第 4 行 4 列 以 后 仍 保持 为 上 Hessenberg 阵 的 形状 。 取 ?了 29: 


оор Ep | 
е 


фу, (пн- 1) 只 Householder 阵 ， 它 把 


` ЕУ (l) ; ¿157 
) рор : Bi ; z bi; : Bi- \ 


| 
po 
ЕЕ К | 
ОЕ И. 
l 41 + М 
B,=| o ipp := ВУР: ВА (3.3.35) 
\ 0 . Í 
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中 的 Ву) 变形 为 


ТИВ 0 | i 
Ua (3.3.36) 


.0 ， Í 
WEA. ШШЕ, U, 实际 上 仍 是 一 个 三 阶 Householder 隆 与 一 个 
单位 陈 的 直接 和 ， 而 B，= PsB1Ps WUBI FIER: 


X 1 X + X 


(8.3.37) 


С> tee 
.... 


它 的 第 1 0.2160 LHessenbergH, Be 中 除 左上 角 在 前 三 
列 含 有 一 个 4x3 的 和 矩阵 外 ， 其 第 4 行 4 列 以 后 仍 保 持 为 上 
Hessenberg 7, B HUER SB 的 形状 是 一 样 的 ， 因 此 ， 此 司 
的 计算 便 可 组 织 在 一 个 循环 之 中 。 每 个 P. ЖР, 外 ， 其 任务 是 
把 B;- ;的 第 i 列 化 成 上 Hessenberg 型 ， 而 每 个 P, 的 计算 将 归 
结 为 一 个 U; 的 计算 ， 其 计算 可 仿 (3,3,25) ~ (8,3,31) 的 计 
算 进 行 。 

ЖЕ, RTIRAT РНЕ А АУРЕ Н ЕЕН 
QR 分 解 的 实 的 计算 方法 ， 其 中 分 解 阵 具有 较 好 的 正 交 人 性。 

另外 , 前 曾 指 出 , 当 和 插 阵 有 等 模特 征 值 时 ,QR 分 解 序列 的 极 
限 将 不 再 共有 所 上 三 角 阵 的 形式 , 极限 阵 中 将 出 现 阶 数 大 于 2 的 
对 和 角 块 ， 这 种 矩阵 的 特征 值 难于 处 理 。 在 有 了 带 位 移 特 别 是 带 
两 步 共 板 复位 移 的 算法 太后 ， 和 矩阵 有 等 模特 征 值 的 困难 就 不 青 
严峻 了 。 如 图 3,1， 设 A 为 某 实 阵 ， 其 等 模特 征 值 分 布 在 以 原 
点 为 中 心 ， 以 了 为 半径 的 某 贺 上 且 对 称 地 出 现在 x- 轴 的 两 侧 。 
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当 产 生 位 移 时 ， 新 原点 如 靠近 某 一 特征 值 ， 必 也 靠近 与 其 共 斩 
的 特征 值 ， 但 同时 却 远离 了 共 余 的 特征 值 ， 使 原来 有 几 对 等 模 
特征 慎 的 问题 ， 在 位 移 以 后 ， 化 为 只 有 一 对 最 小 的 等 模特 征 值 
问题 。 可 见 ， 使 用 带 位 移 的 QR 算 法 ， 不 仅 能 加 速 收 敛 过 程 ， 
而 且 其 适应 能 力也 很 强 ， 


图 3.1 等 模特 征 值 


$4 QR 方法 的 细节 


4.1 QR, 子 程序 

用 ОВ, 代表 由 Hessenberg Hit А 计算 它 的 带 两 步 位 移 Ж 
( 实 或 共 统 复数 ) 的 QR 分 解 的 实际 计算 程序 ， 这 个 程序 将 是 整 
个 QR 算法 的 核心 子 程 序 。 作 为 其 主要 输入 的 形式 参数 包括 : 
矩阵 的 阶 数 %，、， 和 矩阵 入 和 两 个 以 实数 形式 给 出 的 位 移 信 息 

о=К,+К„, 6=Kk,k., (3.4.1) 

其 输出 则 是 〈3.3.7) 中 给 出 的 43， 它 将 取代 和 а 
的 存 贮 单 元 。 

ЗЕ] {А.} 始终 保持 着 上 Hessenberg 阵 的 形式 ， 其 次 对 
角 元 在 工作 精度 内 可 能 化 为 零 。 出 现 这 种 情况 时 ， 应 分 豚 地 把 
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A, 的 特 征 值 问题 化 为 低 阶 阵 的 特征 值 问题 ， 这 样 可 以 大 大 地 
节省 计算 工作 量 。 为 了 实现 这 一 点 ， 可 以 从 第 站 行 往 上 数 ， 托 
合 于 
aiil <E (ї=п, п—1,+е,1) (8, 4.22 
的 最 大 足 码 记录 下 来 ， 设 为 mw，QR 分 解 序列 计算 便 只 在 第 央行 
( 列 ) 到 第 + T GOD 之 间 进 行 。 
在 实现 
As =B,- = Prote P, A, P ee P,-1 

ВӘТ, п 

В;=Р; В;-\Р:, }= 1, 9,6—1 

Бу= А, 
КАЯА. H 


‘Pis l- v, (007), 


 k=sign(x,) (xi +y] + Z1)'2, (3.4.3) 
V=; +P ej, +t Pei.2) 
Ф,=у,/(Х,+К), Ф,=2,/(х, +k); 
WH х,,у,,2, 给 定时 ， 由 4, 计算 As 的 过 程 就 完全 可 以 进行 
т. 令 | 


В;= B!_ P; , (3.4, 4) 
Ві, =P;B;- = (1-0; (007)) В; | (3, 4, 5) 
1 = с07В;_ 1 (3,4, 6) 
则 
Ву. = В; – 617. (3.4.7) 
РЖ: 


В; = B}; - u; , 
&=аВ_ү©: . (3. 4. 8) 
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HARAP 所 需 的 输入 信息 Xi y TI H~ -点 不 同 ， ЇР, 所 
FRX yi, Z Z: di 

X, =a, +0202; —ga,, + p, 

Yı =G; G); +G;,;G;, —-0@,|, 


Z; = 93,931 


计算 出 来 的 ， {参看 (3. 3. 22)), Hu Рг, “зэ, Pu-i ВТ ЖЕНУ X, 315 
Z, IJ 2 BPB, 了 B -中 的 元 素 提 供 ， 员 ] 


y, = 0072, у ]= 1,2, 9,8-2, 3,4,9) 
z, =b pa j++ 32 hF z, = 0. 
于 是 有 关 B Ba «6, B。，, 的 计算 几乎 可 以 在 周一 循环 下 统一 地 
进行 处 理 了 。 这 样 编程 的 结果 ， 从 41 算出 Ai 大 约 只 需 5% 次 
乘法 ， 而 在 降 阶 的 情况 下 还 会 更 省 - . 些 。 
4.2 位 移 的 选择 

使 用 带 位 移 的 OR 分 解 技术 ， 昌 的 在 于 加 速 QR 分 解 序 列 
的 收 和 化 进程。 然而 ， 在 当 过 程 显露 出 其 种 收敛 趋势 时 ， 这 种 技 
术 才 是 比较 有 把 握 的 。 往 往 丰 -- 些 简单 的 措施 ， 虽 不曾 在 理论 
于 活 明 是 最 好 的 ， 但 却 能 帮助 我 们 去 “捕捉 ”这 种 趋势 ， 

把 矩阵 的 右 下 角 的 二 阶 短 阵 的 特征 值 & 和 &, 计算 并 夺 放 
起 来 ， 称 之 为 老 的 近似 特征 值 。 当 上 н, EERE, WA Wi 
把 它们 的 实 部 和 虚 部 存放 起 来 。 然 后 ， 用 不 带 位 移 的 两 Р QR 
分 解法 式 As 并 也 求 出 新 的 4 рн, WREE Т в, Я 
Вов, . и.) адр ве, вусто тву", шоо, ЈЕЛЕ Л 
п р ЗЭН, НОЕ ЕЛС Н, 9-5 Aa, 
YAA RRIA, ET AEROS E Н, 而 把 有 E 
ERE. H 
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ио вии, G-1,2) (3, 4.10) 


Bj, ВАКА СКН kash. хи Зра 
k'u = ku ({= 1,2), (3. 4.11) 
这 表示 强 令 新 老 位 移 -- 致 ， 期 仍 用 原来 的 位 移 ， 而 ki”=0， 
(=1,2)， 即 在 开始 时 的 位 移 量 是 取 为 零 的 ， 这 里 用 有 ,,k, fE 
存放 位 移 的 单元 ， 而 ki"*(i=1,2〉 是 其 流动 值 。 当 
р ы h G= 51 3.1.12) 
时 可 取 
k =u (1=1,2), (3.4.13) 
于 用 新 算出 的 近似 特征 值 作 为 位 移 量 ， 当 《3.4. 10)》 只 有 一 个 
成 立时， 由 于 使 (3.4.12) Ж УЛКЕН" (CE= 工 或 2)， 可 能 
是 实数 也 可 能 是 复数 ， 当 其 是 实数 时 ， 由 于 另 一 个 到 应 当 相 
Fo WUR | 
кү = К = у (ф= I 或 2) 
从 而 
g= 209, p= uF, 
当 山 ?二 复数 时 ， 可 下 
ky? = ky = Ret; y, 
得 
о =2Ңе(и''), p= (Не(и{'°))2, (3.4.14) 
(3, 4,14) Ж н” G= RD 是 实数 或 复数 都 是 通电 的 。 因 
确定 新 位 移 的 信息 。(3,4.10》 路 的 -> 因子 到 得 稍 大 或 稍 小 一 
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当 乞 阵 右 等 模特 征 但 时， 如 等 模特 征 值 个 数 > 大 于 2， 杂 
件 〈3.4.12) 可 能 经 多 次 试验 都 不 满足 ， 正 如 QR 方法 收敛 性 
证 明 中 所 作 的 分 析 那 样 ，4, 中 将 有 一 个 上 阶 的 对 АЙ, 其 元 
素 是 摆动 而 不 收敛 的 ， 当 记 论 特征 值 的 寞 最 小 时 ， 这 个 对 角 决 
将 出 现在 А, 的 右 下 角 。 为 了 克服 这 种 情况 ， 可 在 程序 中 设置 
一 个 记录 使 (3.4.12) 不 成 并 的 计数 器 ， 当 使 (3,4,12》 不 成 
立 的 次 数 超过 基 一 -规定 的 正 整 数 T, 时 ， 就 把 矩阵 归结 为 有 等 
模特 征 值 且 又 是 个 数 大 于 2 的 情况 .和 由 于 从 阵 的 行列 式 的 绝对 
值 等 于 年 阵 的 各 特 镍 值 的 模 的 乘积 。 对 于 等 模 情 况 ， 这 个 模 应 
等 于 |det(C) | ” 。 四 此 ， 位 移 量 可 取 为 

k =k, = + еіС) |", (3.4.15) 
这 里 CC 是 4, 的 由 第 mm 17 (0) 到 第 n 行 OD AREE, 
r 是 它 的 阶 ，. 上 式 趾 “+” 号 的 选择 可 使 之 与 trace (C) BJ =, 
Т, КЛУЗ 
Т, = тіп(и-7№,+ 1,10). 

4.5 工作 精度 与 旺 阵 的 预 处 型 

Жи PI HIRE EE A J EK КЕЙП ЖК | А! к 作为 和 的 特征 值 的 上 
界 ， 如 果 机 器 字 长 为 上 上 ， 则 此 时 合理 的 工作 精度 应 取 为 

s=2 MA (3.4.16) 
ЇН #Е——5&ЗЕБ ИН p, НАН 可 能 比 和 4 的 依 模 最 大 的 特征 值 还 
大 许多 ， 这 时 ， 按 (3. 4,16) 来 确定 & 就 不 合 实际 了 。 这 时 ， 
应 利用 对 角 相 似 变 换 把 | А] к 适当 减 小 ， 这 个 工作 叫做 对 系 阵 
进行 平衡 化 ， 其 要 求 是 使 短 阵 的 各 行 各 列 中 依 模 最 大 的 元 束 ， 
不 要 在 数量 级 上 有 太太 的 差别 ， 

3.41 设 


6104: 


100 1 100. 


З 10 1. 

Ат Ае Z 604 = 24.5， 和 扼 阵 的 实际 依 模 忌 大 的 特征 值 为 
17.1. 
4.4 计算 次 序 

用 QR 方法 求实 矩阵 的 全 部 工作 内 容 ( 包 括 预 处 理 ) 如 下 : 

(i) 利用 对 角 相 似 变换 使 А 适当 减 小 ; 

Gi) 计算 |Alle， їтасе(А) X г=2-'||А|к; 

did 用 正 交 相似 变换 使 A 化 为 上 Hessenberg P£. 

(iv) 计算 右 下 角 的 二 阶 矩 阵 的 特征 值 上 ,及 Kk,， 并 给 定 
初始 位 移 量 k, = К, = 03 

(v) Ж Hessenberg 阵 的 次 对 角 元 为 零 元 的 位 置 ， 确定 
nps Š np 之 nn 一 1 时 输出 态 的 一 个 或 两 个 特征 信 ， 并 使 外 РЕ] 
阶 数 减 1 或 2， 

(vi) 调用 一 次 QR, ЖЕРЕ: 

(vii) 重新 计算 4, 及 4,， 并 依 (3.4,:0) ~ (3.4.14) Ж 
新 修改 位 移 量 ， 必 要 时 依 〈3.4.15) 确定 位 移 量 ! 

(viii) ЖЕ (у) ~ (vii) 的 循环 ， 站 到 算出 全 部 的 特征 优 
为 止 ， 
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(5,0 -2,0 –5.0 -1,0 
ERO еро теб Ж] 
ü 2,0 2.0 -3.0| 
1.0 -2,0/ 
算 得 P= ls r= 1, ЖЕ Во, = р, = 0, 调用 一 次 
QR,，， 得 
4.11828 3,46451 ~5.39263 1.510845 
|^0.29992 0.68721 -3,30064 —4.23760! 
Аз =| 0.93016 1.11718 0.71200," 
| 0.22015 0.92266. 
由 Ai 算得 ko = —0,84268, иу = 1,03720, 此 时 条 件 (3.4. 12) 
EJ 18 ЛЖ, Л Ноз = на) + ш) 0, 19452, о-ви 
= – 0.87103. ИН QR ,, f ИЕ. 
“3.88102 5,50657 -2,83249 -9,8166 ` 
„0.08301 2.29698 -3.41894 3.17136 | 
лч 1.65698 -0.18116 2,413877 
| 0,01060 –0. 99684; 
由 As 得 ki = 1.02709, в = -0.15091. 此 时 条 件 (3.4.12) 
НА RZ, MRI = -2.05418， po = (Us = 
1.05491, 
再 调 ОК, 得 
4.01900 0.73616 -6.17208 0. 85558` 
-0.02762 -0.19762 -3.25500 -3,83089 
сы 1.68124 2,17861 1,23705 ` 
-ë -1.00000 ; 
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H А, 得 4&7' = - 1, aT 2,17861, ERRI (3.4.12) H H 
对 7 RY EROP -2 p (1Y?)*=1， 得 
/ 4.01231 5.45684 -3.02039 -0.83340 
0.00903 2.11330 -3,33301 3,23455 
A 1.57244 0.12561 2.40441, 
е А .-1,00000 ， 
此 时 《4,3) 元 素 已 经 在 机 器 精度 内 化 为 零 ， 一 个 特征 值 4, = 
一 1、 已 经 可 以 输出 ， 去 掉 第 4 行 4 列 后 ， 仍 取 初 始 位 移 信 息 
seu 计算 在 第 1 至 3 行 3 列 进行， 算得 
н = 1.119455 - 2, 063361, 
ut = [, 119455 + 2,063361i, 


调用 СК, 后 得 


“3.99618 4.15400 4,64849 іж 7 
0.99182 0.37161 1.17200 {ж | 
муч -3.74868 1,63220 I+ " 
: 一 1 / 


ШАШ” = 1001905 — 1,999051,и{° = 1, 001905 + 1, 999051, 
此 时 条 件 〈3.4.12) 对 丙 个 上 ЯЛЕ, ШУ о. = Оф н? = 
2.00381, P: = Ви: = 5, 0000. 149 


i 4.00000 5,04835 —3,65643 3 * 
E 1.87849 -3.59100 {ж 
MRT, 1.32902 0.12106 132 ° 
2-1,0. 


НА, a 18 677 = 1,0-2,0, и” =1,0+2,04, 于 是 求 得 全 部 
符 征 值 为 ; А = 4, Аз = 1.02.01, A = - 1. 
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$5 ЗЕ АЈ QR 算法 


5.1 QR 算法 与 对 称 性 
把 QR 方法 应 用 于 对 称 符 阵 ， 理 应 得 出 更 进 一 一 步 的 结果 。 
我 们 首先 指出 ， 对 称 性 在 QR 变换 下 仍 是 保持 的 。 设 和 = А, E 
实 对 称 阵 ， 有 ,是 А, 经 - 次 QR ЗЛЕЗ ВЕ; 
А, = ОЕ, А, = КО, (3, 5.1) 
由 于 an ОТА,О É A. ШЕШ о A, s. 
A, у oJ } 只 存 贮 其 上 三 角 阵 部 分 ， A асс 
节约 一 半 。 
然而 ，LR 方法 却 不 具有 这 种 性 质 。 但 若 把 LR 分 解 修改 成 
Cholesky 分 解 ， 却 仍 能 保持 对 称 注 。 即 令 
A, =LLT, A, = JL, (3,5,2) 
则 
А, =ТАүтгТ, Б (3,5,3) 
RJ hL, А, 仍 是 对 称 的 。 但 在 此 时 ， 不 仅 要 求 4, EWKA Hi 
Н.Ф ЖА, EEEN, ЖОШ (3,5,2) 的 分 解 中 将 遇 到 复数 运 
算 。 这 是 QR 方 法 应 用 于 对 称 阵 时 所 不 具有 而 为 LR 方法 所 具有 
的 缺点 。 
把 QR 方法 与 Cholesky 方法 加 以 比较 ， 可 进一步 看 出 二 者 
的 差别 和 联系 。 由 于 | 
Ат=(0,++0,) (及 Ri) (3.5, 4) 
及 
Аі? = (ADA = (К, К) (QQ) T (О, s Q,) (RiR) 
= (Re R1)? (RR), | (8.5, 5) 
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而 由 А, 的 Cholesky 54g, Ж 


£. = 1, A s+ = L+; > $= 1,2, =+, 
x (8. 5 rà 
A = A, 
可 得 
有 (3.5.7) 
和 
А. = Дз. (3,5,8 


ат, А, 的 Cholesky 分 解 序列 的 第 2s+ 1 个 就 是 4 的 QR 
分 解 序列 的 第 s+ 1 个 。 由 于 实 对 称 阵 的 OR DRAEK, T 
Ж ‹3,5,8) 又 是 任意 实 对 称 阵 的 奇数 次 Cholesky 分 解 必 是 
实 的 一 个 证 明 ， 
由 于 QR 分 解 的 序列 将 不 改变 矩阵 的 2- 范 数 和 欧 氏 范 数 ， 
和 矩阵 序列 中 各 元 素 显然 是 有 界 鸣 ， 而 在 Cholesky 分 解 中 ， 当 
矩阵 近 于 奇异 时 ， 其 三 角 阵 因子 中 的 元 素 的 上 界 ， 一 般 是 元 莽 
估计 的 ,所 以 从 算法 稳定 性 来 看 , 这 又 是 QR 方 落 的 另 一 优点 。 
5.2 QR 算法 的 三 阶 收敛 性 
A= А, 是 对 称 阵 ，{4.) 是 由 4 产生 的 OR 分 解 序列 ， 记 
А? A 
А, At] (3.5.9) 
ЖЕНЕ ЖОЖ ЕЕ ПА? | к-> 0 BJ ë BE ЖШ, ， 即 如 能 由 
1 |= |21, 88 
| ЛА z= 00e  (p>1) (3.5.10) 
АЯ] ЕЛ KÉ s ВКл, РКЕ E Р-ГЕ. BA; E: r Pr 
方 阵 ， 而 l=<r<n. 
定理 3.5.1 ШЕРА, 生成 的 带 位 移 的 QR 分 解 序列 
共有 三 阶 的 敛 速 ， 而 位 移 最 的 选择 始终 用 大 = a, 
证 明 iz A, 的 依 模 最 小 的 特征 值 人 的 重 数 是 ”>， 即 
109 


| 
HE Aror tes As jE 
Е, С,1)} 09-0) 
p н] 
据 QR 方法 的 收敛 性 的 一般 理 沦 可 知 ，G, 将 以 零 阵 为 极限 ， 记 
М(@й=1,2,+е,п-т) ЮЕ, ЧУ ЕҢ. Аү(й=п-к+1, e,n) 
为 H, 的 特征 值 ， 当 s EDAR, Ii h 


s 


(3.5.12) 


А 区 | т 1 (3.5.13; 
s= "f. " i s|: p= ` - - ) 
ek H, | a 
а | 
Р À Y 
(АА) се, овен (з,5,4) 
К ; ЕЕ А (3,5,15) 


由 于 А, 以 ,为 + ERTE KAA BURA (п-т). 5— 
方面 ， F, XI ÉS n- r 个 特征 管 为 А-А, (1=1,+#,п—?”), 它 
们 均 不 为 零 ， 故 F,- AAT 的 秩 也 是 (n-r), Р-Н Я 
分 解 | 


F,—- A1= L.R. , (3.5, 16) 
作 
І; 07а | 
1-| | (3.5.17) 
. Р, Ї А < 
其 中 P, 满足 
P,(F,- АР +ЕК = 0, (3,5,18) 
R, #L;!k, f 
L(A,- A.D - | 1. (3.5.19) 
0 єР,К,+Н, — À,I ТК as 
上 式 两 端的 秩 均 应 是 ”一 六 必 有 | 
EP,k, + H.- À,I= 0 (3, 5, 20) 


• 110, 


与 (3.5.18) ЖНА Р, 得 


—Е?КТ(Е, -AD lk. + (Н,— А) = 0, (3,5621? 
H. =A, I +E’ ki (F, 一 人 Ti) k, 
=A, +M, , (3.5. 22) 
而 
М, =е°К1(Е, А, (К, (3.5.23) 
于 是 
IM, а= е7 (F, -åD 'k,| £ 
=ЄєЗ!КЇ (Е, ADT ty'ik, le 
L a U, 2 
аА, А 
5. Аад. йыш ЈА, А,Б. {8,6,2 
2 зауы 6 | 
特别 ， 有 有 


|а — 4, Е А.Р A аше Ае (3。5.25) 
HEE, nf i 
|a - а |> A Àn на 5. Ta Ане, А, | (3.5,26) 
(1=1,2,+#,п—т), 
А-а |А А. + 12, дзе |А, — A | (8, 5.27) 
(= м-РЪ1, «6, Bn), 
下 面 我 们 研究 对 А, 实行 一 步 毕 位 移 的 QR 算 法 的 效果 。 位 
HERK arns & 
Q. R, | 
Р; 2 i. r], (3. 5, 28) 
以 使 P. (А, a21) 成 为 上 三 衣 阵 的 正 交 阵 ， 十 是 
* 此 处 用 到 不 等 式 ， ПАВ іг тіа (А0: Bhe А ЕВ). 
„111° 


А,,,=Р,(А —а 1Р7 
Ж ЕЁ,» С, +1 
`. н! 
应 有 
S,(F, ~ant) +ет,К = 0, (3,5, 29) 
Сї, з= (eSk, +T,(H,—~a ml) RT, (3.5.30) 
НІК, 15,1, "J 
[GF 11615,15 + 17,1115, 0н, оа, 


及 
16,1 = eliT ,kT (Р, 一 Ga5927) te 
«ет, |. max (Арі ал)! 
1<;<n-r 
<2ё&!|Т,'\к/1А„—.—А„|. (3,3,31) 
最 后 


[G,, ESET lE] An- Aal ? 
+ 2є|\т,!мпах|А; -akn |/| An- — А, | 
< тоё Т.А, — Anl? 
107° /[А,., Anl e 
这 就 证 明了 算法 的 三 阶 收敛 性 。 击 证 明 过 程 还 可 看 出 ， 从 
的 依 模 最 小 的 ~ 个 特征 值 是 同时 求 出 的 ， 于 是 有 重 特征 值 的 情 
形 对 于 对 称 和 矩阵 来 说 ， 就 不 再 是 一 种 缺点 而 是 一 种 优点 了 。 


5.5 ”对称 带 状 阵 
没 A 是 带宽 为 2m + 1 的 实 对 称 降 ， 即 
G;; =j; L j=l, 1s, E, 
G;;i = 0 li-jl>m, (3,5.32) 


осн: AER RRE QR 分 解 变换 后 仍 为 对 称 带 状 阵 ， 且 
带宽 不 变 。 
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Ар, (і= 1,2,+#,п-1) 是 初等 Hermite 阵 ， 其 中 P, 将 使 
Pipi- P A) 的 第 i Я ЕДИ, BP, P.A 5 P,. sP A 
的 前 i-—- 1 列 是 一 样 的 ， 于 是 


Р,-:'"Р.А= Е (3.5.33) 
是 上 三 角 阵 ， 它 的 上 半 带 窜 是 2m +1 而 不 是 m+1， 令 
О=Рр,.«Р,.,, 
有 
A=QR 


КА, = КО = RP Pn WRH Po Pane Paa El fr yE 3 F 
К, SJE RP P, -的 下 三 首部 分 是 带宽 为 由 +1 的 阵 ， 由 于 
RPP,- FOR MERRE, K QR 实际 是 带宽 为 2m+l 的 

在 讨论 对 称 带 状 阵 的 带 位 移 的 QR 分 解 时 ， 位 移 ШК, BJ 
选择 ， 仍 可 按 $4 中 所 述 的 一 般 原则 进行 。 本 有 段 所 要 讨论 的 jË 
节约 内 存 的 最 大 可 能 性 ， 

H 于 A, 是 对 称 带 状 阵 ， 可 以 只 输入 其 上 三 角 部 分 ， 为 输 
人 方便 ， 可 以 把 4 的 非 零 元 0.,;,; 放 在 二 维 数组 BL1 : n; 0 : т] 
BIBLI, КІ, Н i= 1,2, 66,0, k= 0,1,*, minn -i m), 
H A, 计算 A, 时 ， 主 要 经 过 以 下 两 个 步骤 ， 

G) 由 А, 计算 R=P,- PAi; 

Gi) ШЕ RA, = RP, Pai. 

H T P:P; P, A, 不 改变 P.,- P I A #J B Í — 1 行 ， FF 
DLP eP A, Ж í 行 的 输出 就 是 P= P.- "P IA, Ж 11ү) 
я, ЖТР, Р.А Ж І 行 的 宽度 是 2m +1 而 不 是 六 +1， 
这 样 ， 用 它 去 冲 掉 А, 的 第 二 行 是 有 困难 的 。 但 是 如 果 注 意 到 
在 由 R 计算 4, 时 ， 有 些 不 必 记 录 的 中 间 结 果 可 以 及 时 剔除 挤 ， 
以 便 尽 可 能 的 节省 存 贮 量 和 和 计算 量 。 | 

. ti3。 


区 m=2，n= 了 为 例 ， 我 们 将 通过 比较 民 和 民 P; FE 
况 来 描述 这 个 问题 的 计算 与 存 贮 的 策略 


R ‚ ЕР, 
( x X x x ООА Ө Ө > х 
ж. ж б) AGEk 
x x ххх||А@@х x x x | 
x X x x x x x x | 
x X x x x x | 
x x x x | 
ж, х; 


R 在 右 乘 以 P, 后 ， 它 只 影响 R ОВ = P|, Ший A. @ ЛП e 
RETR. EE, HAEATA, EURAS R P,, + 
时 将 不 再 变化 ， 即 它们 是 А, 的 第 1 列 的 最 后 输出 信息 ， 画 有 
久 的 元 素 在 RP ,继续 右 乘 P:… 了 肛 ， 它 们 将 发 生变 化 并 且 对 于 形 
BRA, 的 第 2、3 PERHE КУ ЕА НАЈ: Өну: 
素 ， 在 以 后 的 计算 中 ， 虽 然 也 要 发 生变 化 ， 但 它们 对 形成 As 
的 对 角 线 以 下 的 第 2 列 以 后 的 元 素 却 没有 贡献 。 仿 此 分 析 可 
A ÆR 中 真正 对 形成 a; 的 各 列 在 对 和 角 线 以 下 的 元 素 有 贡献 
Анк Hf F28 1,9, 6, m+1 条 对 角 线 上 的 那些 元 Ж. úT 
WREE ДР, а, КР, 的 第 1 {тн "+1 4 3638 n[ L! 
HRP ÉR 1 Янг A ВУС НЧЕ, FPE, AARP LE, 
可 用 RP1P; 的 第 2 ИИТ {Т 
对 角 线 以 右 的 那些 元 素 。 е | 
„+1 Р, | 
算出 以 后 ， 前 m+1 шр Е : 角 化 ， 而 后 继 的 流动 矩阵 
Ре Р, ОР, s P A) 
的 前 w+1 行 和 m+ 1 ЯЕ Pasi P A) 的 前 由 + 行列 是 不 变 
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IERI, [NE 
PP is PLAP, 
的 第 1 列 就 是 最 后 输出 的 第 1 列 ， 在 这 之 后 ，Pi: 的 信息 就 不 
再 有 用 而 可 以 退出 存 区 了 ， 因此， 计算 如 果 拨 
ve (Pasi Pasit PA Pi) PP, (3,5, 94) 


的 次 序 进行 ， 就 可 以 不 必 殷 P,, "P 1 的 全 部 信息 存 迪 起 来 ， 
而 只 镍 准备 一 个 存 凤 
P:s Piy, Pasi 
WEK UAPA., HARA (m+ 1) 1:。 si 还 应 有 对 
| Р.Р, ОР», “Р А)Р, + 


进行 加 工 的 辅助 存 区 。 其 一 ， 实 现 由 А, TAR 称 为 辅助 存 
区 I 其 二 ， 实 现 由 RR 汗 算 4， BORDEI, 二 者 的 容量 均 
为 (т+1)х(2т+1), 

由 A, 计算 A, 的 主 归 步骤 如 下 ， 

算法 3,5,1 

1) 辅 区 I 清 零 ， 辅 区 古 清 等 ， 把 对 称 带 状 阵 4 的 上 三 角 
部 分 元 素 (1, itk) 依 压 缩 形式 让 入 二 维 数组 BL1 : n, 0 : т] 
АУ B[i,k]Jrh, (i= 1,2,+еп,‚К = 0, 1, +,шып(п-1,т), Dn=6, 
m=2 00], ША. ВИЖ 


а, а: Qi; 
G, 022 05: а: 
а; з Gs Пу а, 435 
ds аз, Gat ак бє 
Gas Us Gss ase 


а,в sge Agg 
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Pio Bii bs а ts 0,3 


, bag ba, 0: 05: @›у @,, 
В = |н оз, bs, 74 ауз 03, 0,5 , 
i b,, bi: i j Gaa 045 Aia | 
| b, Ж 0 | йй; 0 | 
„йу, 0 .ф у» XQ. 0 л" 


2) 确定 位 移 量 К. КЖ АШИ ЕЛ ЛАО КАЛЕН, SPE 
k,= 0; ЖЖ А ТЕЗЕ t 值 附近 的 特征 值 时 ， 可 取 k,=t， ЖЩ 
b oe (bo ~ Kk) GE l en); 

3) 为 辅 区 I ERS. BE B 的 前 m+ ЗАВК ТІВ 

对 角 线 右 合 的 各 行 ， 并 使 下 三 和 角 部 分 与 上 三 角 部 分 对 称 、 以 
т = 2 为 例 ， 此 时 辅 区 1 6010252 . 
8 ЖШ # 区 I (SJ) 
‘bo—k, Ь,, bi: 0 0 
| b, 5, —k, b,, b,, 0 . 
К b,, b,, bso 一 友 。 bs b,, 

以 下 按 (3.5.34) 的 计算 次 序 实 现 算 法 。 

4) i=., 2. m+n РУ: 

24 1<n ilk 4.1), GRE 4.4): | 

4.1) 用 辅 区 工 的 第 1 ЖМ ñ fr j BL w, КОЕР P= I — 

2w wi, ИР ZGB3522 1; 

4.2) щат 时 做 4.3)， 否 刚 转 4,4); 

4.3) 送 w, 人 到 W 存 区 的 第 i fj: 辅 区 工 的 第 工行 送 人 辅 区 
的 第 了 行 太 角 线 右 侧 ， 转 4); 

4.4) 用 环 的 第 ] fr wi P=1-2ww, H PERAE I, 

ж И 1 В 1-т—1{1, ХП ЕЕ 11, E 1 
2), RAER, ТІН 1 fTB] m + 1 4 55 38268 A 5 T + 
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ЯНА, БТІ 5147, ЕБТ, ЖН: WE 
上 上 移 一 行 ， 

4.5) щі<и В, 4.6), ЖШ 0 

4.6) W; 送 入 W 区 未 行 ，B 的 第 i 行 送 辅 区 I 末 行 对 角 线 
am BE 3 + HAR GE IJ I E), BBa, biie 
Pi -win ОКА ІН (n+l т), (m+l,m- 1), *, 
(т+ 1,1) АВ) #4). 

以 上 步 邓 完成 时 在 数组 B 中 得 到 的 将 是 和 A 的 # 位 移 的 
QR 分 解 的 压缩 存 贮 形式 ， 


| 第 三 章 习 н 
RER 
⁄° 1 уи 1 0,01 ` 
+. |1 ë oa | 0.01 1 0.01 = 
| 00 о 17) | 0.01 1 J 
1 07 * 0.01 1 


各 做 两 次 带 位 移 的 QR 分 解 ， 位 移 量 取 为 矩阵 右 下 角 的 元 圳 、 
3.2 зди, В 


的 QR 分 解 序 列 是 不 变 的 。 
3.3 ЖЖ 


` Аз 7 
的 QR УЖ ЛЕУ, TRAR? 
3,4 不 可 鸭 的 Hessenbetg ЕЛЕМ, ШЕН. 
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3.5 构造 矩阵 A 使 其 LR 分 解 是 发 散 的 ， 
3,6 ЕВН Ж А 


pa ез | 
еа d е | 
s= ёз "w, Í 
а, ` е. 


`. е, á, | 

的 所 有 元 素 满足 ， ldi,lel <max 14:1, RE Ai 是 矩阵 S 的 第 【个 特 芷 
值 , 又 S ОХУНА БЕН ЕЛЖ ДЕ г] Ezma |А, 
3,7 设 了 是 实 对 称 年 阵 ，B = QR 是 其 QR 分 解 。 
试 证 

[Fan] æmin 14: (В) |. . 
3.8 设 4 是 不 可 约 的 奇异 的 Hessenberg RE, А, 是 4 的 QR 分 解 的 第 2 项 ， 
试 证 А; 的 最 后 一 行 是 零 行 。 设 4 是 不 可 约 的 且 以 丰 = 0 为 严重 特征 信 的 | 
Hessenberz 阵 ， 试 推广 所 证 的 结果 ， 
3.9 设 det(4) 关 0， 则 存在 排列 阵 P tE PAH LR У, HALGIR 
由 的 单位 下 三 角 阵 的 元 素 依 模 不 超过 1。 
3.10 I A,—1, А, = 0,8, E A, КОКУ Ж. ШЕН, Q,—1, R> 
3.11 WAR (8.4, ~ (3,4,9) 编制 一 个 求 上 Hessenberg 阵 的 带 两 步 
位 移 的 QR 分 解 程序 。 并 用 它 计算 


га 一 2 – 5 -1 ) 


1 0 —3 2 | 

А; = H 
0 2 2 -3| 

`. 0 i) 1 _ Ф. 


Аз. 
3.12 КТА ТУЙ Е Hessenberg 阵 的 行列 式 的 程序 ， 并 
用 它 计 算 

n, 


5 
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的 行列 式 。 
3.13 ”六 本 章 第 5 节 所 洲 的 方法 编 竺 一 个 求 对 称 带 状 阵 的 全 部 特 生息 的 扣 


-4 2 1 

2 4 2 1 : 
| 
| ї 2. 2 5) 
\ 1 2 4 | 


的 全 部 特征 值 。 

3.14 ARE ШАД УЖ. А, 是 A 的 QR 分 解 序列 的 第 :项 ， 设 记 
А, 的 对 角 元 素 为 ， | 
| Ats Ооз С. 5 
而 次 对 骨 元 记 为 : 
` В,., B." Bsn-1e 

Е, se ©“, @ п.п Веза "е, BW, i.s-1 可 由 G09, dr， 


B3,。…，B3, 经 有 限 次 有 理 运 算得 到 . 


第 四 章 “广义 特征 值 问题 
п S 


设 4 和 吾 均 为 于 阶 矩 阵 ， 广 义 特 征 值 问题 就 是 求 满 ДЕН 
阵 方程 š 
Ax = ¿Bx (4,1.1) 
的 数 4 及 非 零 向 量 x， 它 们 分 别称 为 广义 特征 值 问题 和 A-- АВА) 
特征 值 和 特征 向 量 。 当然 应 该 把 N(4) [| N (B) 中 的 非 零 向 量 
《如 果 存 在 的 话 ) 排除 在 外 。 因 为 对 于 这 些 向 量 ， 任 意 数 和 都 
EREHE, PARESE. HR TAHET, 特征 值 4 
为 特征 多 项 式 
pn (A) = det(A — АВ) i 
HFA. 
现在 ， 我 们 在 前 党 的 基础 上 ， 对 广义 特征 值 问题 的 计算 方 
法 作 初 步 分 析 : 游 虑 一 下 解决 这 一 问题 有 些 什 么 困难 与 矛盾 ; 
设想 一 下 解决 这 一 问题 有 哪些 途径 。 
最 为 自然 的 想法 是 ， 如 果 B 为 非 异 ， 那 末 方 程 《4,1.1) 就 
等 价 于 方程 
В-!Ах = Ах, (4.1.3) 
这 样 问题 (4.1.1) 就 化 为 了 14 的 人 标准 特征 值 问 题 。 只 要 好 
关于 求 逆 运算 并 非 病 态 ， 那 末 就 可 利用 任何 一 种 标准 特征 值 问 
题 的 计算 方法 来 求解 问题 (4,1.3)， 
在 工程 计算 中 ， 常 常会 磁 到 4 和 3 均 为 对 称 正定 的 情形 (或 
仅 其 中 之 一 为 对 称 正定 )。 璧 如, 在 结构 系统 的 振动 问题 中 ，A 
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ВВЕ, ВЕЕ, Л = o: (o 为 自 振 频率 ) 就 属于 这 种 
情形 。 这 时 问题 (4.1.1) 就 称 为 对 称 广 М 特征 值 问 题 、 由 于 
B 是 对 称 正定 阵 ， 所 以 对 空 可 以 作 Cholesky 分 解 ， 
B-LL” 
这 里 工 是 对 角 元 皆 为 正 的 下 三 角 阵 。 众所周知， 这 一 分 和 解 是 十 
分 稳定 的 。、 于 是 《4,1.1) 就 等 价 于 ' 
L TAL (Lx) “А(ТЛ ж), 


ES 
y= 1х, (4,1,4) 
C=L AL", (4,1,5) 
则 (4,1,1) ТРАВНА ТЛ АЕ КАРЛЕН Ара: 
Cy= Ay. (4.1,6) 


这 样 前 面 讲 的 关 千 对称 特 征 值 问 题 的 计算 方法 部 可 用 来 求解 
(4.1,.6)。 例 妇 ， 可 用 TRED2 将 C 佬 为 对 称 三 对 角形 ， 然 后 利 
用 TQL2 求 出 C 的 全 部 特征 值 和 特征 向 量 ， 最 后 利用 ВЕВАКЖ 
出 原 问 题 的 特征 向 量 。 

然而 ， 在 以 上 讨论 的 各 种 计算 方案 中 ， 列 含 着 许多 了 矛盾 。 
首先 ， 如 果 B 对 于 求 逆 运 算 为 病态 ， 那 末 此 时 就 不 能 较为 精确 
地 计 算 了 4。 从 而 必然 影响 特征 值 、 特 征 向 量 的 精确 计算 。 
н Е, Вв КАЯА Ч. ЛАЛЕ ЕР: 
ЖЕ B клер o ЛИ А9 з ЖЛ, ЖШ ТЈ Я (4.1.3) JÁ 
НПА НИКЕ, ЕУ B 的 扰动 是 十 分 敏 
感 的 。 例 如 。 设 


其 中 上 >0， 则 
det(A— АВ) = EA" +3А—4, ; 
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ША — АВ 的 特征 值 是 


_ —3+ Z 9+16e 
Ае 5525 Заа 


26 
Ческо, А -AB 的 特征 值 趋 于 3 和 >。 这 说 明 ，。 很 小 的 变 
(6, Врв 很 小 的 扰动 ， 就 能 引起 第 二 个 特征 值 很 大 的 改变 ， 

为 了 解决 这 一 予 硝 ， 是 然 应 避免 求 道 运 w. Ол 算法 就 是 
基于 六 一 想 活 产生 的 一 圳 算法 。 

前 面 , 已 介绍 了 求解 标准 特征 值 问题 所 QR 算法 , НАЖ 
想 是 ， 采用 一 系列 (无穷 个 ) 本 相似 变换 将 原始 问题 化 为 上 三 
角形 或 拟 上 三 角形 。 忆 此 我 们 很 到 局 发 ， 是 否 能 将 这 种 想法 移 
植 过 来 ， 以 求解 广义 特征 值 问题 。 

”因为 对 A 和 B 进行 相同 的 西 等 价 变换 并 不 改变 原始 问题 的 
特征 值 。 所 尽 人 们 想到 利用 再 等 价 变 换 同 时 将 4. 了 化 为 上 三 角 
АВ. EE, 问题 (4, 1, 1) 的 特征 值 即 汀 由 A、 妆 对 和 角 元 之 比 给 
填 , 而 整个 计算 过 程 并 不 涉及 求 道 运算 .但 这 一 算 东 也 有 和 缺点 , 它 
ER UE ЕИ А ДАВЕ ВОВЕ Л, ЭА] ЖОЕ, НЕЙ КЕНЕ, 

对 于 对 称 的 广义 特征 值 问题 ， 夯 然 可 以 化 为 对 称 的 标准 特 
征 值 间 题 。 可 是 ， 实 际 工程 间 题 中 的 和 矩阵 A 和 B 往往 是 对 称 带 
形 矩 阵 ， 带 宽 常 常 很 小 。 而 将 (4,1,1) 化 为 〈4。1.6) 意味 着 
带 形 结构 的 破坏 。 因 为 一 般 而 言 秆 阵 C 将 为 一 满 阵 。 不 充分 利 
HA BEBERI S MERRE (4. 1. 6) ， 这 样 的 方案 显 
然 是 低 效 的 。 针 对 A、B 为 稀 崇 带 状 的 性 质 ，Peters 和 Wilkin- 
son 提出 了 直接 求解 对 称 广义 特征 值 问 题 的 方法 。 其 基本 思想 
与 标准 特征 值 问题 物 Givens-Householder Jy 法 是 类 同 的 。 简 
aZ, WAJ Sturm 序列 ， 

PA=], 
了 (Dadet(A 一 和 7) (172 
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的 同 符号 数 ， 结 合 二 分 法 求 得 满足 给 定 转 度 的 特征 值 。 和 而 确定 
sturm 序 列 〈4.4.7)》 的 同 符 号 数 时 ， 可 以 充分 利用 4.B 的 稀 醇 
WARED, ALDO AH АРААР ИТЕ. 

在 工程 计算 中 ， 对 于 振动 问题 ， 往 往 只 需求 & - AB Ehi 
几 个 特征 值 及 其 相应 的 特征 向 量 〈 相 当 于 求 系统 的 几 个 最 低 的 
固有 频率 及 其 振 型 ) 。 这 时 对 (4.1.6) 采用 子 空间 迭代 法 也 是 
有 利 的 。 采 用 子 空间 和 迭代 法 求解 (4,1,6) 时 ，C= 工 -145 了 不 
必 真 正 形 成 ， 而 只 要 存 贮 其 因子 IL 和 和 从 阵 A。 央 为 在 子 空 间 适 
RET, ЯНА 5 ЈЕ ЈЕ, ПАЖ АА БЕ 为 工 
жг. Жи, БУЈНА ВОВСЕ, LIER 
计算 效率 ， 


32 Q J 法 


按 前 节 的 设想 ，Q2 算法 可 按 以 下 三 个 步骤 进行 ， 

(1) 首先 利用 正 交 三 角 化 算法 (例如 可 采用 Householder 
方法 或 修正 的 Gram-Schmidl 算法 ) BAX EZA É B, EJ 
时 将 这 些 变换 施行 于 4 化 为 A， 如 t= 6 时 有 


x x X x x x x X X x x 
x X X x x X 0 x x X x Xx 
X X X Xx x x 0 Ü x x x X 
X X x x x x 0 0 0 x x x 
X X X X X X 0 Ü 0 0 x x 
Xx X X x Xx Xx 0 0 0 0 0 X; 
А В 


(2) ARDEM IER ЕЕ ЖР АХИ |. Hessenberg, 
但 要求 这 些 平面 旋转 阵 问 时 作用 8 后 仍 保持 为 上 三 角 阵 .消去 A 
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次 对 角 线 下 的 元 束 ， 其 顺序 为 : (n,1), (1,1), 696, (3,1); 
(п, 2), (п - 1,2), GD; mn- 2)--JG, WE АШ (i, Й) — 
元 ， 可 通过 左 乘 平面 旋转 阵 

1. 0. 

I 1 | 
cosp, sino, ' 1-1 (4,2,1) 
—sing, соя®Ф, i 

1 : 


Q;- a =: 


N0 К, 
1-1 1 


来 实现 。 而 Q,-,.; ЕА ЕВН, ЖЕЙН (1,1-1) 位置 上 ( 即 次 对 
ARE 引 人 了 一 个 非 零 元 。 但 这 个 非 零 元 可 以 通过 右 乘 另 一 


平面 旋转 阵 K 1 N 0. 
ба : 
с050; Sing; i~1 
ссе —sin0; cosĝ; i (4.2.2) 
| 1 | 
0 Е 
i—i i 


Н. RANEA Q... A 并 不 破坏 已 经 得 到 的 零 元 素 
以 上 例 来 说 明 ， 第 一 步 变换 过 程 如 下 : 


X X X X X X X X X X x x 
X X X X X X 0 x X X X x 
X X X X X X 0 0 X Xx X x 
X X X X X X 0 0 0 x x x 
хх ххх х 0 u б 0 x x 
0 x x X X Xx 0 0 0 0 x x 
QstAZse Q. B 


X x X X X X 


0 x X X X Xx 


0 0 X X x Xx 


0 0 0 x X % 


0 x x 


0 0 0 0 0 x 


Q Ë Zss 


第 二 步 变 换 过 程 如 下 : 


x X X X X Xx 


x X X X X X 


0 x x x x x 


x X X X X X 


0 0 x x x x 


0 


x X x х x X 


0 x x x 
0 0 0 x x x 


Ü 


X X X X X X 


0 x x x x Xx 


0 0 0 0 0 x 


0 x x x x x 


4 


Q. Q; BZss 


0. .0.,А25. 
X X x X X х 


x X х X Xx 


x 


0 X х x x 


Ü 
0 
0 


x xX X X x Xx 


X X X X X X 


0 0 x x x 


0 
0 0 0 0 


0 x x 


Ü 


0 X X X x Xx 


0 


x 


0 


X X х x x 


Q. Q. BZsaZ a; 


о, sQ А224 Б 
如 此 继续 执行 以 上 步骤 ， 最 后 А e% E Hessenberg 阵 而 BB 05 


保持 上 = 


B. 


角形。 我 们 把 这 两 个 矩阵 仍 分 别 记 WE А, 


(3》 因 为 


• 125 • 


这 里 U，V ER" "为 筑 一 类 不 交 阵 ， 因 为 
det(A — AB) = det (J) * det (V) rdet (A – АВ) 
= деі(А — АВ). 
由 此 可 见 ， 问 题 (4.1.1) 应 与 问题 
Ах= Айх (4,2,3) 


有 相同 的 特征 值 。 另 外 ， 若 xz 为 问题 〈4. 2.3) 的 特征 向 量 ， 则 
Ух 为 问题 〈4.1.1)》 对 应 的 特征 向 量 。 因 此 ， 现 在 只 要 讨论 广 
义 特征 值 问题 〈4, 2.3) 的 计算 方法 就 行 了 。 

现 设 Б AiR, ПШ 外 二 及 各 -:。 由 于 及 为 上 Hessenberg 阵 
而 六 为 上 三 角形 ， 故 也 为 上 Hessenberg 阵 。 根 据 81 的 分 析 ， 
现在 的 目标 是 要 把 与 上 同时 化 约 为 上 三 角 阵 ， 也 就 等 价 于 将 
сию =. 

鉴于 以 上 分 析 ， 我 们 想到 利用 带 原点 位 移 的 QR 算法 。 若 
将 它 施 于 Č, BAPER) ， 则 在 一 定 条件 下 ， 该 矩阵 序 
列 应 趋 于 一 上 三 角 阵 。 具 体 地 说 ， 即 


(С=с. 3 
| Q, (G, 一 Kil) = R, (k=1,2, baa) (4,2,4) 
| RQ + к= С,. 1, 


HS 
С... = 0,20, (4.2, 5) 

ПЕЈН КЕКЕ C B EQ. ВЕЖ НС, +... 
假定 A 与 Bs 满足 А.В; =C ВА, 5В055731] E Hessenberg 
阵 与 上 三 角 阵 ， 那 末 可 以 设想 这 样 的 计算 方案 ， 避 开 直接 计算 
如 1， 亲 接地 求 出 Co， 继而 构造 A-1 Bpi: 

Aria = Ye (4,2,6) 

В, = Q,B,V ro 
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XEVA NEE, HERE A, XL Hessenberg HNB, ;为 
TARM., TE 
С.А.В 
= (Q.A,V,) (Q,B,V,) ` ' 
= Q,C,Q”. (4.2.7) 
如 何 避 开 直 接 计 算 B;! 而 间接 地 求 出 Q. WE? H E EB3 3.12, t 
(4.2.7) MWE, WR Cea 为 不 可 约 的 上 Hessenberg F£, 则 
Cii 与 О, 唯一 地 ( 除 模 为 1 的 常数 因子 外 ) 由 8 的 第 一 行 决定 。 
这 样 我 们 就 很 自然 地 想到 次 位 移 QR 算法 ， 为 避 旬 复数 运算 又 
可 采用 二 步 QR 算 法 。 
据 前 章 分 析 知 ， 为 实现 二 步 QR 算法 ， 首 先 应 找到 一 西 阵 
Pos 它 的 第 一 行 应 与 矩阵 


Pa (С) = (Cp ~ Xal) (Cs — Xer D (4,2,8) 
的 第 一 列 成 比例 ， 其 中 Xi = 为 。 而 
(IP)? + ҮЙРҮ” ҮҢӨ, 
оуу mi 
{ i 11 
ФС) ё. = Р у? = Ket Ау.) : 
0 : Ó; 
TEN 
r | 
+ Xk- lo (4.2.9) 
: 0 
>] 


由 此 可 见 ，9: (Cw e: 仅 用 到 Ci 的 前 二 列 。 但 因 B 是 上 三 角形 ， 
йв: БЕЯ, Тас, 的 前 二 列 为 


ofore 


В BaN! 
ака ). АЭ 
, АЕ 
这 样 ， 为 了 计算 Pu， 只 项 计算 了 ,的 二 阶 首 壮 节 第 阵 的 首 即 可 。 
显然 ， 这 要 比 计算 B;!' 的 效果 好 得 多 。 又 由 前 章 知 , 因为 yz(Cy 
的 第 一 列 至 多 前 二 个 元 素 不 为 零 ， 卜 Po, 不妨 取 作 如 下 形状 ， 


Р = ` (4. 2, 11) 
DNE 

ENR, 是 个 三 阶 的 初等 镜像 变换 阵 。 设 92 (Се, =, ДІ 

PI 的 第 一 列 即 为 全 = z-i, HD P. 应 具有 这 样 的 性 质 ， 


gl” 
Ре, = 了 1 或 go = оё, (g= + 1:1)。 当 然 这 样 的 Po 是 能 构造 
HAI, PaA, IPB, MRH H 下 形状 (n= 6 为 例 ) 


x x x X x x X x X X X x 
X X X X x x 了 XXX x Xx 
x X x X x x X X X X x X 
0 0 x x x 其 й 0 0 x x x 
0 0 0 x x x 0 0 0 0 x x 
0 0 0 0 x x} 0 0 0 0 о x 
Р,А, Р,В, 


根据 以 上 设想 方案 ， 为 了 求 出 4 和 Be ,， 需 找到 这 样 的 
1ESZEEU RIV, EUP AV p EHessenbergÉ£, UPB V% E 
三 角 阵 。 同 时 ， 还 要 保证 U,Po= Q4 与 Ps 有 相同 的 第 一 行 ， 这 
样 & 与 @. 即 有 相同 的 第 一 行 。 据 定理 3.3,1 知 ，@f4 =Q U, 和 
Vi 的 形成 步骤 如 下 : 

(1) 首先 将 PoB, 按 下 面 方 式 化 为 上 三 角 跨 (以 4=6 为 例 ) 

选取 初等 镜像 变换 阵 Zo, (E PBZ 中 (3,1) 元 和 (3。 2) 
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元 变 为 老 。 然 后 百 用 平面 旋 转 阵 R =Z 使 PuBZuzi 中 的 
(2,1) TEA, 于 是 PA A,Z4Z2 和 PoBo} 就 有 如 下 的 形 
状 ; 


x X x x x x x Xx x x x X 
X X X x x x КЬ хох 
(的 0 0 x x x X 
@ x x x x x 0 0 0 x x x 
0 0 0 x x x 0 0 0 0 x x 
0 0 0 0 x x 0 0 0 0 x 
Po4xZoZ。 PnBiZo2 0 
请 注意 这 里 Zo 和 2Z6 的 形状 为 : 
x x x 0 0 O x x 0 0 0 
x x x 0 0 0 x x 0 0 0 
x x x 0 0 D 0 0 1 0 0 O 
0 0 0 1 O 0 0 0 0 1 0 0 
0 ú 0 0 1 0 0 0 0 0 1 O 
0 0 0 Q 0 1 00б 0 0 0 1 
Zo Zi 


(2) ЖШ З AEP, EP AZZ. PE E Ar E 
上 的 元 素 变 为 零 ， Р, 的 形状 如 下 : 


1 0 0 0 0 O 

0 x x x д 0 

0 x x x 0 0 

0 x x 0 Ü 

0 0 0 0 1 O 

0 0 0 б 9 1 
P, 


于 是 P; Po4xZoZ! ÑP, PB, ZZ Au FERR: 


x 
x 
Ü 
0 
0 
0 


{ 
| 
| 
j 
f 
| 
| 
| 


0 
0 


СЗ) РЈ 7. ЈАНО ЕЕ В (1) (2) 步骤 。 
(4) 当 算 法 进行 到 第 4a- 2(= 4) 次 循环 第 (1 ) 步 时 ， 这 
ТАУЫШ НЕШ КЖ. | | 


选取 一 :平面 旋 结 阵 Ра, 


І 
і 
| 
| 
t 
l 
i 
| 
| 
| 


! 


<, P, 的 形状 如 下 ， 
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0 


= 


© >o о = 


о о = 


©? o mÊ. S oo © 


© — < oa 


Р, 左 乘 这 二 个 矩阵 厂 有 如 下 形状 : 


х 
EENE 和 хох x 
0 x w“ . X x x 0 0 хіх x 
кла ыа чын бу Жеш 
0 поо |0 x 
0 0 ока x x поо! 

l 


| 
(5) 选取 一 平面 旋转 阵 Z,， 右 乘 右 边 那 个 和 矩 阵 ， 使 其 中 打 
圈 位 置 上 的 元 素 变 为 零 。 间 时 Z 右 乘 左边 的 年 阵 ， 显 然 它 仍 保 
持 上 Hessenberg EER. EHEER. MAr: AB: 均 
“жї. 
以 上 全 部 过 程 构成 了 所 谓 二 步 QZ 算法 。 实际 上 ， 它 是 --- 
步 QR 算法 的 一 种 推广 ， 
现在 进一步 讨论 计算 细节 。 根 据 以 上 分 析 。 我 们 知道 ， 对 
(4.2.3) 施行 二 步 QZ 算法 ， 首 先 应 找到 正 交 阵 Po， 它 的 第 -…. 
行 应 与 矩阵 多; (CO 的 第 一 错 成 比例 。 为 此 应 找 出 C; 的 前 二 列 ，。 
HE (4.2.10) 知 ，C 的 前 二 列 应 为 : 
aB ap BA o PBR BURY ` 
NBA ао 89 ca PAE /BB 
: а /В2' 。 4,2,12) 
: : 0 
E 
таз K 和 Xe 1， m Бу yE Ea E£ C, 的 尾 - ЕРА 
味 ， 我 们 招 它 近似 地 取 年， 
aA ИАКОВ с Ване 
и а )( 0 са! ) 。 (4,2,13) 
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fr LK SH x... УЕ (4.2,13) 的 二 个 特征 值 。 据 二 次 方 
程 根 与 杀 数 的 关系 即 得 ;: 

үч ку 二 wh ИВ + ARE, n 0 

— Anën Bit). (ВАКВА), 

| К" КЕ 1 = (а? lR- 1 аА) e h (ВВ) . (4, 2.14) 
将 (4.2.12) ЖП (4,2,14) 代 人 (4.2.9) RDI #, М ЛЕ 
TE: 

x _ Zrin- д‘) а Е адк: (йе, А 
ао Кы -gin (aih - n) ВоВ, 


i Из. at’ -|Ë B Фр _ апр? 
Th? те; ЧҮ ТЕ: БОСА 9 
| у су ИЕР 
ИК ӨЕ, а аат 
Ви" Bi BEBE В ВА... 
| ИЕ | ea. 
i Вю) 1,9-1 
| 
i ae 
i = В RER? > 


注意 , 首先 , 41 的 每 个 分 量 我 们 部 冬 以 Ви о, 这 对 确定 Po 并 
无 影响 ,确定 Ps 的 具体 过 程 , 见 前 章 $3; 其 次 ,为 了 程序 设计 .上 
的 上 原因， 把 9， 的 三 个 非 零 分 量 分 别 i ECs zos C30, JE 
Р.А, 第 一 到 的 元 素 记 作 ci , E P IPO AZIZ .Z Z 的 第 二 列 记 
ко, 等 等 。 至 此 ， 我 们 即 可 构成 一 步 QZ 算 法 。 

算法 4.2.1 26 EEA, BER" MBX: F ,‚ ШОУ 
BAR (1,1,1) 的 全 部 特征 值 。 用 此 算 东 求解 的 步骤 如 
下 : 

由 利用 正安 三 角 化 得 法 将 8 化 为 上 三 角 阵 上 了 ， 辐 时 将 A 化 六 
Д.  А= 4, В = В; 
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2) 利于 平面 旋转 阵 将 A 化 为 上 Hessenberg B, EHER 
如 为 上 三 角形 ; 
3) 对 了 =1 6-1, “l, 
3.1) 对 k= 1,2, 9, тС ТВО ОКНО, 
3.1.1) 按 (4.2.15) о оз Caga 
3.1.2) 对 1=1,2,+#,п—2, 
3.1.2.1) 确定 Pi-1 ЧА и-и, 


EREMIE, 
ЗЕ I Ebar A 
JE KHAM E , 
1.2.3) MEZ- :消去 Bi 名 ,形成 相应 的 
жі. 


3.1.3) NEXT і, 
3.1.4) MEP- Elan- ЛНАУ. 
3,1.5》 确 定 Z，- ;消去 Bsr- 1， 形成 相应 的 和 矩阵。 
3.1.62 ПНЕ ОСЕДІ, ЖЕЛ, ор Вур M: 
жа). 
3.2) NEXT k 
4) NEXT j 
5) END, 
以 上 算法 仅 是 一 个 简单 的 示意 描述 。 许 多 具体 细节 ， 读 者 
一步 参阅 Moler, С. В. 和 Stewart G，W. 的 文章 [9 J. 
这 里 还 应 特别 指出 的 是 , 和 QR 算法 类 似 , 在 QZ ARAH, 每 
选 代 一 次 应 由 下 到 上 地 检查 4 的 次 对 角 元 素 。 若 某 次 对 角 元 可 
忽略 , 则 可 将 问题 分 裂 为 二 个 低 阶 的 问题 , 从 而 分 别 进 行 迭代 。 
ХТ (4,2,3), ЯНЕ. 事实 上 ， 经 过 有 限 
次 再 等 价 变换 后 选 代 终 止 ， 见 有 
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АЙАР, (4.2.16) 

В=@Вї. (4.2.17) 
Ww ¿S Bu Е = G 的 次 对 角 元 相当 小 )， 而 日 与 
p 为 正 交 阵 。 据 (4.2?.16) 和 (4d.2.17) 和 

В-'АЯЎ=ЎВ 'A. (4.2.18) 
Fg BT AE SAZ ЭХЕ А, АЈ (4,1,1) 的 广义 特征 值 ， 
那 未 据 〈4, 2.18) 即 有 

ВСА (ўе) = 0B As, 

| = А;(@®,). (4.2,19) 
ш Ер, VBT% (4.2.3》 对 于 1; 的 广义 特征 向 量 ， 而 
-4 的 特征 疝 量 可 由 齐 次 方程 

(А-АЙ)#;=0 (4,2.20) 

确定 之 。 综 上 所 述 ， 问 题 (4,1,1) 对 应 4: 的 广义 特征 向 量 为 
VYY8t。 顺 便 指出 ，QZ 算 法 需 二 个 xm 辅助 数组 ， 因 此 当 ” 很 
ХЕ, FERRA. 


$3 Jeters-Wilkinson 方法 


Ер ННЯ, X TAREE A. В 的 对 称 带 状 
БЕ, Peters 和 Wilkinson 奖杯; 芷 对 称 特 征 值 问题 的 Givens- 
Householder 方法 的 思想 用 来 解 次 对 称 六 六 特征 值 问 题 为 
此 ， 我 们 首先 回顾 -- 下 标准 对 和 你 特 御 信 问题 的 Givens-Hou- 
seholder 方法 的 基本 依据 : 

(1) ЖА ЖЕЕ, CRAIE, А Е РБ 
HEFIR ЕЯ | | 

Р.А), Р, (À), +, Р, СА), ss, Р, СА) (4,3,1) 
为 Sturm 序 列 ， 其 中 P.G =1, P,(A) =det(A'hl Ар); 
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(2) 在 以 上 的 假定 下 ， 记 ako) 为 序列 (4.3.1) 在 o 处 相 
Ф КАБАН, MER A BA 个 特征 值 不 小 于 
g, 

Bl rapi БК ЧЕТ Р УНАА], 051 中 所 
说 , 对 称 广 义 特 征 值 问 题 等 价 于 对 称 标 准 特征 值 问题 (4.1.6). 
К, AHS EEEC ERARA RRI. IRR TAJ AE 
个 结论 。 HA, ЮТИИ: A. В 的 对 称 带 状 结构 ， 我 们 
下 不 着 望 豆 正 去 构成 矩阵 C， 因 此 就 不 能 直接 利用 序列 (det 
(CE AD ) КИНЕ Ж ЖИШШ СА - AB) 的 特征 值 。 然 而 ，det 
(AI АВІА) 与 det(C0 др) (k = 1, 2,+е, 1) 在 以 上 假设 条 件 
下 ， 有 上 县 有 相同 的 符号 ， 这 样 问题 也 就 迎 轧 而 和解 了 ， 事 实 上 ， 若 
没 B 的 Cholesky 分 解 为 B=LL7， 则 

І #2072 pihl, 
(LER) TI AIAI( 了 CI) -T = c 
于 是 
det (4142 — АВ1* 2) 
= det[ L» (LER 1 ATI LAD -T ADLE] 
= еб {C -AN LT] 
= [det (L"+)) ]* edet (c™ -— АЈ). 
因为 L= 1, =, n) 209856, WM det(A АВО) 的 符号 必 
与 det (C -AD (k =1,2, =n) WIS. RE E KRR 
183] 600, 

在 以 上 假设 条 件 玉 、 不 小 十 go 的 4 -ABRIERA E 16 Ж 

序列 
det( AI -CBA ) (k= 0), 1, еве, 2) (4,3,2) 
在 9 处 的 同 号 数 a(9)， 这 里 规定 det (4 _ AB = 1, 
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但 在 这 里 应 等 别 指出 ， 序 列 〈4.3.1)》 AF 列 (4,3,2) 在 
计算 上 是 有 区 列 的 ， 前 者 因为 矩阵 4 可 用 初等 镜 象 变换 化 约 为 
对 称 三 对 角 阵 ， 所 以 序列 (4. 3,1) 可 以 递 推 计 算 。 可 是 序列 

(4.3.2) 的 计算 却 无 此 方便， 

通常 采用 列 主 元 素 消 去 法 计算 det(A'* -oB 的 值 ， 以 保 
证 计算 的 稳定 性 。 但 应 注意 ， 这 时 列 于 元素 消去 法 是 在 天 阶 首 
主子 矩阵 中 进行 的 ， 而 Kk 是 以 2 逐次 递增 至 2。 所 以 ， 这 里 列 主 : 
元 素 消 去 法 与 求解 线性 方程 组 时 的 情形 路 有 不 同 。 其 算法 简单 
描述 如 下 ， 

MEE 4. 3. 1 RAER EREREA, BER", BAER, AR 
det(A: ~ 0o B+) 的 符号 s,(k=1, 2, ==, ny, JE С=А-0В, 
0 为 给 定 的 数 ， 

1) És, = sighy) ，。 

2) К= 1,2, 0%,7~] 

2,1) ERS), i = Sk 
2.2) і= 1,2, "+, k 
2.2.1) ÆI Yaaa] >al, Wj Yenc G= i, 
itin), 2.2.3). 
2.2.2) Ү,..,: 15У. 5, MES = —5,.,. 
2,2,3) Е Pri,:= Е 
2.2.4) ВУ =Y. Yesin ЕН, 066,0), 
2.3) NEXT i, 
2,4) ЯУ, nna L0 WAS = 一 Sirl。 
3) NEXT k. 
4) END. 


例 4,3.1 Ж) 4, 3.1, ВАЕ A RIEBE 
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.1 4 б? 
:4 2 1 O 
C=, 
i 0 1 3 4 
©. @ 4. 3 
各 阶 首 主子 式 的 符号 ， 


® 显然 56= l, s= 1, НАЈ (2,2,1—2,2,4) 执行 如 
F: k= 1 时 变换 为 ; 


42 1 O 2 з $o оф 

С "талоо ` "jo 7/2 -1/4 0: 

„тн g GRE i 

第 - 行 与 第 0 1 3 4 POTRE g 1 3 4] 
行 交换 上 x 第 一 行 

he 00 4 3 д7" 0 0 4 8. 


KHA 1901—01 НУ. Ya I) =, МАЈУ 220, gs. = —1, 
k = 2 时 变换 为 

о Ü 

0 7/2 -1/4 0 | 

о 0 43/144. 

0. 20. 4. 8 


2. DEN 
第 三 行 减 去 
2 dehe e 4—= 
де x 1 Y х0 = 
7 ш _1] 


А ТОЗА, Hi43/l42>0, RERI 2,1) Аз = 
=, К = 3 时 变换 为 
‘4 2 1 б “4 2 J 0 


—» 


| © 7/2 -1/4 0 pamasa 0 7/2 -1/4 0 
第 三 行 与 第 第 四 行 减 
二 0 0 4 3 去 43/56 0 0 4 3 
四 行 交 换 :0 043/14 4 :x 第 二 行 .0 0 0 95/56, 


因为 进行 过 一 次 交换 ，?yss。 Li Yas 同 号 而 95756 之 0， 所 以 54 = 
T 
‚ 137, 


从 以 上 简单 的 例 莹 可 以 看 用 ，P-W 算法 的 主要 优点 Ж: 
能 够 充分 利用 原始 矩阵 A 和 B 的 稀 醇 带 状 的 特点 ， 以 而 省 去 了 
许多 存 贮 量 与 计算 量 。 因 此 ， 它 适用 于 求解 大 型 对 称 广 闵 特征 
值 问 题 。 事 实 上 , 若 记 4 - 0B 的 半 带 宽 为 m + 1( 包 括 对 和 角 元 ) + 
则 算法 4.3,1 的 第 k 步 仅 涉及 第 k-m+1 到 第 k+1 行 的 带 内 元 
ж. REAT, ИЖА y И a EREK, (B K 
不 会 超过 ?т+1. 


= 


mo] 


k-m+l k 
图 4.1 A-oB 在 列 主 元 消去 过 程 中 带宽 变化 


PP- 到 算法 的 结构 基 六 上 和 Givens-Householder 算法 是 一 
致 的 ， 即 利用 算法 4.3.1 确 定 序列 (4, 3,2) 的 同 符号 数 ， 然 后 在 
一 分 法 来 隔离 特征 值 (部 分 或 全 部 ;。 二 分 法 可 以 与 求 特征 疝 
量 的 反选 代 法 以 及 Rayleigh 商 欠 代 结合 起 来 ， 相 辅 相 成 。 二 分 
靶 不 必 进 行 到 隔离 出 精度 范围 的 特 鱼 值 为 止 ， 而 只 需 进 行 到 将 
特征 什 卫 离开 为 止 。 然 后 ， 用 反 送 代 求 近似 特征 向 量 ， 再 利用 
Rayleigh 商 使 特征 值 精确 化 ， 如 此 往复 循环 ， 直 至 近似 特征 
值 符合 精度 标准 为 目 ， 
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因为 当 B 为 非 异 时 ， 广 义 特征 值 问题 (4.1,1》 与 标准 特征 
值 问 题 (4.1.3)〉 是 等 价 的 *"。 而 后 者 的 反 迄 代 格 式 是 : 

(ВТА - 1,0) 0+0 = xti), (i= 0,1,9) (4,3,3) 
Ноо 8, тт, 为 规范 化 常数 。 (4,3,3) ANELEE 
以 B, HH48 

(А – 1,В) Xt O = Вх„т, i= 0,1,1), (4,3,4) 
这 就 是 广义 特征 值 问题 4 -ABRIR RER E E E Tal 
题 -- 样 ， 由 方程 组 〈4.3.4》 求 得 Xi tU 后 ， 利 用 Reyieigh 海 


х,'* "Дх, tl 


tl "Вх\' + 9 《4。3。5) 


Оох! ° 


将 特征 值 精确 化 最 为 合适 【参阅 下 节 及 习题 4, 6) 。 根 据 以 上 分 
析 即 可 得 到 下 面 的 算法 。 

算法 4.5.2 ZA., BER" 日 B 为 正定 ， 又 假定 广义 特征 
值 问题 4 — AB 具有 相 异 的 特征 值 ， 求 A- AB PA RHE AE 
对 应 的 特征 向 量 ， 

1) Жо 为 和 的 一 个 下 界 ,利用 算法 4.1, 2 计算 序列 (4.3.2) 
В, UAR а (о) 确定 [9，c2》 中 -48 的 特征 值 的 个 
ў (NUMBER 子 程序 ); 

用 一 分 号 将 4 — АВ 的 第 k 个 特征 值 隔 离 在 区 间 [2%, Ау] 
A, BERETE AP =. GQ. tA 或 利用 制 线 靶 确定 
AM (BISECT 和 LINTPOL 子 程 | 这 ); 

D 选 改 初始 特征 向 量 xw 。 通 常 的 选取 法 是 ， 用 部 分 主 江 
消去 将 СА АВ) 化 为 上 三 角 阵 U， 记 下 所 作 的 行 交 换 ， 然 
后 求解 三 角形 方程 组 
ж) 这 里 当然 六 可 将 对 称 广 义 特 ; 值 问 题 化 为 对 称 标准 特征 恒 问 题 ， 
ЖЖ ЕТА. ` 
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Охе =e, (4,3,6) 
WH e 144 1 的 向 量 ; 
4) 对 1i=0,1…… — (INVERS бр), 
4.1) 将 <o 规范 化 , 得 xa, 
1.2) 利用 (А-АВ) 的 LU 分 解 及 行 交换 信息 求解 
线性 方程 组 
BD те ВУ: 
4.3) 利用 Rayleigh нА, И, 
хи ТАХ 
Xi 
4,4) 收敛 判别 ， 妇 果 
[муы 


туйы 
ГАА 


С Т 
А, = 


<e, 


(这 里 e 是 给 定 的 精度 ) Bd, д U өх ORS 
所 求 的 结果 。 转 6 )。 

5) NEXT i; 

6) ELA, = ЛӘ; x, = xti + 127 

7) END. 


34 子 空间 选 代 法 


ЗЕ РЕЛШ БУ 38 ЖЕТЕ: СЫП БЕ?) 是 计算 标准 特征 值 问题 的 
二 个 有 效 算 东 ， 它 们 特别 适应 大 型 铬 跤 矩阵 的 特征 癌 顾 ， 但 它 
们 只 能 求 得 占 优 特征 舍 和 特征 向 量 ，。 然 而 实际 后 题 往往 需要 求 
前 扩 个 占 优 特征 值 及 其 对 应 的 特征 向 量 ， 如 多 元 统计 分 析 中 的 
主 成 分 分 析 等 。 过 去 常 采 用 降 阶 法 ， 逐 一 求 出 前 几 个 占 优 特征 
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值 和 特征 向 量 。 但 是 ， 陈 阶 法 对 各 种 不 同 结 松 的 矩阵 并 元 统一 
的 算法 ; 另外 ， 降 阶 偿 将 破坏 原 算 阵 的 形状 以 及 受到 舍 人 误 凑 
PEK RI Е ПЫ. 

Фр К Е е EE ВЕЛ ЛЕВЕ Бох д, НАЕ 
Жажа: 对 若干 个 试验 哲 量 《可 看 作 RR" 中 菜子 空间 的 基 )》 
同时 进行 选 代 ， 从 而 同时 得 到 前 几 个 占 优 特征 值 及 其 对 应 的 竺 
征 向 量 ( 战 者 说 和 的 占 优 子 空间 ) 。 所 以 ， 了 了 空间 迁 代 法 可 看 
RRE. RER AIE. 

这 是 我 们 仅 讨 论 实 对 称 阵 的 情形 ， 至 于 非 对 称 阵 的 子 空间 
达 伐 法， 读者 可 参阅 Stewart, С. W. AK Cline, M., Jenn- 
ings, A. 等 的 文章 [10]、[113。 为 说 明 方 便 起 见 , 设 人 ER Ж 
ЯГ ЖЕЕ ЕЕН 

ОА, А, < <А, 

х.х... +, X. 
ЖЭ ЯЙ Ж ЕКИ ЙЕ Е ТР В А Е АРС ЇН. MAOR A Дур 
个 占 优 特征 对 (А, жо б=1,2,+е,р), 

设 Qo= GPa g s HU QQ =L. Qy 9.6, 
qe Ж {Ер 个 占 优 特 征 向 量 的 初始 近似 ， 也 可 以 者 作 -p ЗЕ 
空间 的 正 交 基 ， 按 守 演 的 思想 ， 立 以 下 阵 A NERA IE 
量 ， 得 

Ү,=АО,, 4,4,1; 

ak- Rna ДЕРЕ Vo 不 再 弟 列 止 交 了 ， 所 以 应 对 Yu 的 列 

正 交 化 ， 这 可 以 和 用 修正 的 Gram-Schmidt тре Я Z Ж 3: 
й. Ри : 

Vo= О.Е; (4, 4.25 

或 AQ, = Q R.. (4. 1.3) 
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这 里 Q 1 ER"*? 为 列 正 交 阵 ，RER?*? 为 上 三 角 阵 。 进 而 又 可 取 
Q ,作为 新 的 送 代 和 矩阵， 因为 81 的 列 实际 上 是 V。 列 空间 的 正 交 


人 (4,4,4) 
V.,=Q,. К+: (К=0,1,**), 
以 上 达 代 格式 常 称 为 简单 子 空间 壕 代 法 。 容 易 验 证 : 

AQ = Q.R,R, Rie (4,4,5) 


EUER: MHko, Q, 的 列 将 趋 于 4 的 p 个 占 优 正 交 规范 特 
征 向 量 ， 但 收敛 速度 很 慢 ， 
| Оазис R ӘТИ ГЛЕБ: 在 子 空间 $рап(О,„) 
中 ，9@Q, 的 列 未 必 是 A 的 p 个 占 优 特征 向 量 在 空间 Span(C,) 中 的 
最 优 近 似 。 于 是 ， 我 们 必须 研究 以 下 问题 ， 设 给 定 @ER 2 有 
070 = 5， 据 此 构成 p 维 子 空间 后 *= Ѕраһ (О). Ж, E2 F 
空间 范围 中 ，A 的 个 占 优 特征 对 的 最 优 近 似 是 什么 ? 

ШФ p= 1， 即 给 定向 量 4 且 :.9 1;= 1]， 它 作为 4 的 近似 特 
征 向 量 , 对 应 的 4 的 近似 特征 值 ? 应 取 何 值 为 最 优 呢 ?很 让 然 ， 
如 果 Y HRE Aag- grh ik MRE Y HRS RRE. 
# С ARER ТЕ C y AE 

r(q) = Aq — qY 14 


Ў 
gq (А9 -дҮ) = 0 
yia) (.4 一 ?TD) 9 AJ 
>q Pia) 6' 


区 4.2 / AARE 
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Hik; Bl] ТИЕ ЛЕВ А АЧ Rayleigh $ 
7”= Уда - 4А = 004), (4, 4,6) 
WRS ДЕЦ ТЕЕ 
定理 4.4.1 设 A4CR "为 对 称 阵 ， 给 定 QER"? RQ'Q = 
Io WEEBER RARER 
: AQ - QHI SAQ – ОВ. “p=2,F), (4. 4.7) 
其 中 H= Q'AQ=p(Q). 
证 因为 
(AQ -QB)'(AQ - QB) = ОА`О - н? + (H- BU — B), 
而 
ПАО - QB| } =tr[ (AQ - ОВ) (AQ ~ ОВ) 1, 
所 区 
| [АО - QB||k= || AQ - QH|| Ë, 
HHE. (Ы -B (H- B) ЕТА E, W 
ПАО - QB! } = max[A( (AQ - QB)” (AQ — ОВ) )1 
> тах[л (А0 - QH)” (AQ - ОН)) ] 
= 140 - QH!;, 
Pl ЕН, В б’ =зрап(а) REA 的 不 变 子 空间 ， 
可 是 当 取 B 为 А Ну Rayleigh 商 和 矩阵 2(C)R， 能 使 残 量 人 4Q - 
ОВ!,(р= 2,F) 极 小 ， 
现 没 14(H); 0,<0.<:9 <0,, ЖОЕ Н 25 W 
Рт=врап (О) 淮 得 的 .4 的 p 个 占 优 特征 值 的 最 优 近似 呢 ? 
如 果 马 ?为 4p 个 占 优 特征 向 量 张 成 的 不 变 子 空间 ， 则 显然 
有 
Баве шет g'g 
其 中 后 为 王强 件 意 j 稚 子 空间 。 如 果 后 ?不 是 .4 的 p 个 占 优 特 征 
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人 


疝 量 张 成 的 不 变 子 空间 ， 则 很 自然 地 定义 : 


8, = тіп max £ 46 jle pie (4,4,8) 
бсё^ #664 £ 

把 它 作 为 由 与 ! 排 得 的 和 如- 的 最 们 近似 是 合理 的 。 那 末 , 6, 与 

0; 之 人 有 什么 关系 呢 ? 以 下 定理 回答 了 这 个 问题 ， 在 证 阴 定 理 


之 前 ， 首 先 应 注意 于 空间 之 间 存 在 下 列 关 系 ; 


R* 

U 

б'= QR” (QER) 
U U 


б'=б,У!=06К! (G€ R”*i), 
REE, GAS TATRA, H AR" гир) ETZAN, TH 
ZAR 中 的 j 维 子 空间 , ШЫ ЕКА, SICR УСК” 
之 间 存 在 一 一 对 应 风 关 系 。 
定理 4.4.2 B;=1,{H)==0; (j= 1,96, р) 


r 4 
& 
证 B = min max - -(g = Qs, sC Fi, 
Gier FEJ! g7 з 


gig = 870702 2785-0) 
š SOAOs 
= min max. о. 9 
=>» EJS ç š 
sad 
А ШЕ 
= min тах. аы 
GIERE ses; ts 
зҮ 


= 0,. 
由 以 上 定理 可 见 : 万 的 特征 值 确 是 由 子 空间 合 ' 扒 得 的 4 的 


p 个 十 优 特 征 值 的 最 优 近似 。 
IHE; = 0.8: (f= 1, s, p) * LR; =1 F. ЕЁ; = 0 Gj), 
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一 一 一 — 2 T 


=G HG = (QG АСОС), (J. 1.9) 

.0 8, ; 

这 里 G = (81; eng). AH; 可 视 为 和 -pr 的 最 优 近似 ， 所 以 可 
y; = Ов; 作为 对 应 特征 向 量 的 最 优 近 似 世 是 合理 的 ， 进 一 步 的 
论述 可 参见 本 章 习 题 4.8, 0; 和 y; 分 别称 为 算 阵 4 ТЕ (Н, 
Span(Q) ЕН» Ж Ritz 向 量 。Ritz 值 和 Ritz 向量 总 称 为 外 i 
阵 4 在 子 空间 Span (О) 上 的 Rayleign -Ritz 近似 。 

综 上 了 所 述 即 可 给 出 Rayleigh-Ritz Е, Д КРК 0 RR 

RR 过 程 给 定 对 称 阵 АСК 及 了 维 子 空间 6 "= (Sx|x € 
R’), ИНС" Ti rank(S) =p。 利 用 后 ?欲求 4 的 p 个 司 优 
特征 对 的 最 优 近 江 (6;，9;) (i= 1,+#,р), 

(调用 修正 的 Gram -Schmidt FEJE, ЈЕСИ ЈУ 
Ир 

S= QR: 

Gi) 调用 子 程 序 0P 构 成 AQ; 
Gii) 构成 已 的 Rayligh Pj 

H=p(Q) = ОСАО); 
dv) iji Jacobi FREY, ЕНЕ ВЕ 

Hg, = 89, (i= ],**, p); 
(v)JEpk Ritz гр 

y, = ОЕ; (2= 1, ,Pp), 

上 述 过 程 帆 DP 子 释 序 的 功能 是 ;和 抑 阵 A pai nxn 
数组 给 出 ， 而 给 出 了 对 任意 向 量 v 计 算 Aso 的 规则， 在 该 子 程 
ЕШ, EBE A HFEA Arv 的 计算 部 充分 利用 及 的 稀 芍 性 . 
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Ф, RRETHE ЗЭ {НЫНЕ 和 Rayleigh-Ritz 过 
程 结 合 起 来 ， 产 后 新 的 了 了 空间 ЖКУ. 
算法 4,4,1 设 给 定 对 称 阵 ACR S C R"*r, Tq rank 
(So) = 了 PDB， 从 子 空间 后 = ѕрап(5,) Hi, ЖА FJ p Z= S f; hE 
1) 对 k= 1,2, =, 
t, DAH ОР 子 程序 形成 
C, = AS,-,, 
1.2) 润 用 修正 的 Gram-Schmidt 子 程序 ， 正 交规 范 化 Cn 
BS), RE 
С„= 0,В,, 
1.3) 调用 OP 子 程序 构成 40,， 
1, 4) 构成 Rayleigh 商 矩阵 
ñ, =Q] AQ; 
1.5) 调用 Jacobi 子 程序 ， 谱 分 解 
B,.,= СӨС, (8= diag(0,, ,0,)), 
1.6) 形 成 Ritz [а] 
S, = Q,G,, 
1,7) 2 Е Tri Ж КЄЎЇ ЕЕ, 若 已 达到 收敛 标准 妈 转 3) 。 
2)NEXT k. 
3) 输 出 (Өзу) (i= 1, p). 
4) END. 
一 般 而 言 ， 算 法 4.4.1 中 G, 为 一 系列 正 交 和 卸 阵 的 乘积 ， 
设 
人 7 二 了 
那 末 语句 1. 5) 和 语句 1.6) 可 同时 进行 如 下 ; 
° 146 = 


J) #5, = Оз 

DA i=l mt Ё Se= SPD,。 
这 样 逢 阵 G; 就 时 需 明显 形成 ， 在 整个 计算 过 程 中 只 要 ~ 个 nxpP 
数组 就 是 以 应 付 S、C 以 及 @ 的 计算 了 。 其 次 ， 读 者 应 注意 ， 在 
算法 4.4.1 中 ，S 的 列 是 子 空间 AF6 УЗЕ, С, 的 列 也 是 子 空 尺 
ASRA., BAE Ma AKATAA p 个 占 优 特征 向 最 要 快 ， 
当然 迭代 一 次 的 计算 量 相 对 而 言 较 高 。 特 别 是 当 和 矩阵 阶 数 较 高 
时 ， 在 执行 语句 1.3) 时 要 额外 调用 OP 于 程序 Pp 次 ， 显 然 算法 
4.4. 1 的 计算 量 要 大 大 超过 简单 子 空间 迭代 法 的 计算 量 。 为 此 、 
以 下 我 们 来 讨论 如 何 避 免 额外 调用 P 次 ОРТ У. 

AXZ ERA “与 А 具有 相间 的 特征 向 基 ， 所 以 也 可 针对 
4 来 实施 Raylelgh-Ritz 过 程 ， 

如 同 算法 4, 4.1, 首先 计算 C. = AS,  ， ， 然 后 设法 形成 新 基 
CF REFERER 应 满足 以 下 二 个 条 件 : 

ФСР.) 7 (C,F,) = 1» СЕЗ). 

®© CF) "A? (СЕ) = 了 1， (Ritz ТАЈ ЗЕ PE ЛЯ), 
Ер, = 出 ag (ô, :.‹,0,) 为 了 阶 对 角 阵 。 加 式 亦 可 写成 

СЕБЕ. A)A (AS... F.) = ЕТЕ = D”. (4,4,10) 
ВЖ, Е.О, 为 正 交 阵 ， 这 样 据 人 @ 式 及 (4,4.10) 即 有 
CICG,= ЕТЕ! = (Fi’ Di t) D} (DI FI) 
= (F,D,) D? (FpD). (4,4,11) 

BETE, FADEN ECGS O RAE. 

算法 4.4.2 RAETIA СА" М6, СА" irankis) 
=p, AERE 6 =span(S,) HR, 5 ЖАНР АЕР. 

1) 3E=1,2,-, 

1. 1) 调用 OP 子 程序 形成 
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C, = As,. 15 
1, 2) JUN 916 
Н, = СТС, 
1,3) 调 用 Jacobi 子 程序 ， 作 谱 分 解 
Н, = 了 BDIiB7， 
1, 4) 形成 
S, =C,B,D¿', 
1,5) 检 验 是 否 达 到 收敛 标准 ,车 已 达到 收敛 标准 见 转 3》， 
2)NEXT k, 
3) 输 出 (4，yD (El, p), XE y, 是 S 的 第 1 列 ， 
4) END. : 
应 注意 算 靶 4. 4, Б, 和 算 蕉 4,4,1 中 的 5 是 不 同 的 ， 
而 且 算 法 4,4,2 中 的 S 并 不 能 表 成 一 系列 正 交 阵 的 冬 积 。 为 此 
对 算法 4.4.2 仍 须 作 进一步 修改 ， 沙 虑 到 
H, = СІС, = ВІОТО,К, = КТК, = 工 R (4.4.12) 
WR H,=R.L,, ARIE LR 算法 知 ，H, Н, Wi #⁄ UK ХР ЖЮ 
ВЕ. HHE, 4.12) 应 有 
H,= RL:= RRi = R, H,R; ` 
= R,B,D;BTR;: ! 
= (R,B,D; !) D} (D,BIR:!), (4,4. 13) 
HERA, н УА, WAA H, 替代 A, 是 合理 的 。 其 次 ， 
不 难 验证 ， лла ырл 于 是 算 落 4。 4,2 
ННВ BJ 520 
S= CBD; | = Q,R,B,D; ' = О,Р,, 
这 样 S%, 就 有 可 能 表 成 一 系列 正 交 阵 的 乘积 了 。 综 上 记述 ， 即 可 
构成 如 下 RITZIT 算法 。 
算法 4. 4.3 设 给 定 对 称 际 ACR" R SER, 而 
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rank(S,) =p, AF3 空间 6S =span(S,) 出 发 ， 求 4 的 p 个 占 优 特 
征 对 ， 
1) 对 K= 1,2,'', 
1,1) 调 用 OP 子 程序 形成 
С,= А$,-;› 
1.2) 调用 修正 的 Gram -Schmidt 子 程序 ， 正 交规 范 化 С, 
的 列 ， 即 


С. = Q,R,, 
1,3) 有 形成 矩阵 
H, = Е,Е;, 
1. 4) 调用 Jacobi FRF, MEDE 
H, = P.DiPT, 
J. 5) 形成 Ritz 门 量 
S, = QP,» 
1.6) 检 验 是 否 达 到 收敛 标准 , 若 已 达到 收 敏 标准 , 即 转 3)， 
2)NEXT k. | 
3) 输 出 位;; y) Ч=1,+з,р), 
4) END. 


在 一 定 的 假设 下 ， 可 以 证 因子 空间 和 途 代 法 的 收 皆 性 。 我 们 
不 加 证 明 引 人 以 下 定理 。 

定理 4.4.35 АСЕ" 为 对 称 正定 阵 ， 其 特征 值 及 其 对 应 
的 特征 向 量 分 别 为 

ОА А, 6 <, SA, K А, 

和 
: Sis Вус", Sne 
设 SER"r Ң578=1,, Z; 775 为 间 异 ， 则 出 算法 4,4. 3 产生 的 
Ritz 器 最 当天 ->oc Ру 
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sin(y%, Bp i) =o| сәк], (4.4.14) 


n- p +i 


(1= ], +=, D) 
WK Z = (E, Жл, tt). 
据 以 上 定理 知 ， 当 i=p 时 有 


зїп (у, z.) = of dsa]. (4,4,15) 


пайа, а < | |， 所 以 各 用 RR 过 程 等 措施 改进 
后 的 子 空间 迭代 法 ， 显然 要 比 简单 子 空 间 迁 代 法 有 效 得 多 ， 

由 (4.4.14) 还 可 以 看 出 : 在 相同 的 迭代 次 数 前 担 下 ， 愈 是 
排 在 后 面 的 特征 值 及 其 对 应 的 特征 疝 量 ， 它 们 的 计算 精度 愈 是 
高 ， 因 此 ， 在 实际 计算 时 ， 往 往 把 bp 到 得 比 实际 所 求 的 个 数 r 箭 
大 一 点 。 有 的 文献 推荐 ， 取 p = min(2r，r+ 8)， 这 额外 的 p ғ 
个 向 量 称 为 护 丑 向量， 显然 、 对 于 固定 的 +, p 取 得 愈 大 , 迭代 次 
数 就 愈 小 .但 这 样 每 次 近代 所 花费 的 工作 量 就 较 大 , 因此 这 里 有 
个 权衡 得 失 的 问题 , 这 需 在 实际 计算 中 去 探索 , 至 于 5, 的 选取 ， 
可 以 先 取 了 个 由 随机 数 构 成 的 向 量 ， 然 后 将 它们 正 交 规范 化 。 

最 后 我 们 指出 ， 如 果 需 要 求 4 前面 p 个 按 模 小 的 特征 值 ， 
只 要 在 以 上 算法 中 将 4 А-В, 

下 面 我 们 来 讨论 对 称 广义 特征 值 问题 的 子 空间 迄 代 污 ， 正 
如 81 少 出 那样 ， 对 称 广义 特征 值 河 题 

Ах = АВх (4,4,16) 
可 化 为 标准 特征 值 问题 
4y = Ay, 

A=L :AL-7, 
y= L Tx, 
B- LL”, 


(4, 4.17) 
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于 是 算法 4.4.3 和 (4.4.17) 相 结合 ， 即 可 得 到 对 称 广义 特征 估 
ПЛ Ау У р ЕТЕ, 

ВЕЕ АТ, ДРА ТЕ КАЕ РККА ТАЈ 
ЖДАНОВ Ж > К, РР КЕПЕ АТАШ ч, RE 4.4.3 Hi 
语句 1,1) 实际 上 应 执行 


C, =L 4L TSi -15 (4.4.18. 
万 
Saa FLX, |. (4.4.19) 
实际 上 ， 以 上 运算 可 以 分 以 下 步 来 完成: | 
O) NH OP 子 程序 计算 
Za = АХ,.\; (4,4,20) 
(过 用 问 后 回 代 法 求解 
ІС, = Zs. (4,4,21) 


如 时 A, ВЯРА, ЯЖ ТД ЕЛИ, н! 
f y ЈН ЕП ЯЙ ТЕЛ. BA, EATA fo Z В, X ВЕ 
Cholesky 分 解 ， 这 РЈ) ЛАША ВГА НУЖА Ey 38 qr Ж Аз 
E£ Cholesky DADE. REL P, ЖОМЕ R МЫЖ 
解 (4.4.21) 形 状 的 方程 组 集 ， 每 次 迭代 时 仅 Z 在 变化 。 其 次 ， 
对 第 阵 4 亦 可 利用 第 六 章 介 绍 的 任何 稀疏 和 抢 阵 压缩 在 贮 技巧 ， 
以 提高 OP 子 程 序 的 效率 。 

算法 4.4.4 设 给 定 对 称 广义 特征 值 问题 Ах= АВх, it 5, 
ER"? 575. =1,, НУВ p 个 占 优 特征 值 及 其 对 应 的 特 
征 向 量 ，。 

1) 对 B 作 Cholesky 分 解 

B=LL”, 
2) 4 按 某 种 对 称 稀 臣 阵 存 贮 方法 在 贮 
3) 求解 
‚151, 


4,1 


4) xtk = 1, 2› ey 
4.1) 调 用 OP 子 程序 十 算 


Z, = АХ,-1› 
4.2) 求 解 
ІС, = Zes 
4,3) 调 用 修正 的 Gram-schmidt 子 程序 ， 作 
O, = О.Е, 
4, 4) J 
H, = В„ЕЇ, 


4,5) 调 用 Jacobi 子 程序 ， 作 谱 分 和 解 
Н.=Р,р?РЋ, 


4.6) 形 成 S = 0,Р,, 
4.7) 求 解 
LYX =S, 
4.8) 检 验 是 否 达到 收敛 标准 ， 若 已 达到 收敛 标准 即 转 
6), 

5) NEXT К. 
6 (0,0) (= 1, р). 
7) END 


第 四 章 J 题 


求 艇 以 下 广义 特征 秆 问题 Ах = АВх, 


0 1, /1 0 
(1) А= А В=' 1 


10) \ =] 
(2 2) (2 11 
Gi) A=! » B= 
\2 4/ ` 32 3 ) 


| -2 3 一] ， B. 0 2 0! 
ЭМ T 00 3. 
4.2 将 以 下 对 称 广义 特征 值 问题 4Ax= - 1Bx 化 六 标准 特征 值 河 题 
(4,1,6): 
| 2 2 1 
{9 4. 1 4; 
^-2 1 0 05 rt 0 0 | 
1-2 1 0l 04 0 O 
ТЕ , B= | 
0 1-2 1| оо 4 0 
xv 0 O 1 —2⁄ “0 0 0 17 


4.3 ЖА, BER" H BAIR, RETEA SE Ú Я У, EA, B 同时 
西 等 价 于 上 三 角 阵 £, B: 

A= ОНАУ B=UHBV, 
4.4 ЖА, BER" HARARE B 为 正 定 ， Ax= ABx WJ Fr üE {Н 9; 
A< <<: KAn DA UE: 


xT Ax 
А: = min тах --—— 
dimis)x € xTBx 
хао 


这 里 .FF 为 R" 由 的 于 维 了 了 空间。 
4.5 ЖА, B, СЄЛ"*" 骨 为 对 称 正定 ， 斌 证 二 次 特征 伪 问 题 : 
(А - АВ - А2С)х- 0, 
G ИАЕА isa; 
(G —AIo,.)y = 0 


=le, п), 


其 中 
| O Py. ` | х 
С = УЕ А 
СА -С В; х 
(ii) 等 价 于 对 称 广义 特征 值 问 题 
(E~AF}y =0 
其 中 
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с о: { о Ci А a ©. ч 
| , ке „ yel хе Àk, 


с в) L x; 


4.6 设 对 称 竺 征 值 问 题 4- АВ, рУ Н) Rayleigh RHH 


ГАЖ 
х7 Ех ` 


Р(х) = х5 ), 


Жи: 

(1) (ах) = р(х), QQ. 

Gih б (ж) А, (V ixj =D, 

Gii) WP) =2(Ax-— р(х) Бх) /x 5x, 

Су) [СА —G5)x |2, Ax] | р(х) 12 [8х 2, 
FERH НМ? G = pO), 
4.7 1їйр=Р, ЗЕ С4,4, 7) НХ B= Ну Ú p=2, й 
GEFA, Q URIME B, {И BseH 人 想 (4.4.7) 式 等 号 成 立 ， 
4.8 ACR" WIRE, JOA Rhip 维 子 空间 试 证 对 任何 
x€ 7”, Ax- D (x)x:] ZP ERY x ЕА fF + 2 JJ 2 上 的 
Ritz ај. 
4.9 利用 算法 4,3,1 确定 以 下 对 称 S 阵 ， 


фу Че» СЫЗДА a ЧЫГ 
оао 0 0 
Gi) 5 аі | 
1 -2 -2 3; 1-2-2 3! 
\2 0 3 0 “2 0 3 6; 


各 阶 首 主子 式 的 符号 ， 

4.10 编制 算法 4.4.3 能 中 算 程 郭 ， 利 用 该 程 这 计算 矩阵 
/-1 0 3 ON 

¢ -1 0 0 


BIAT УЕ К, Е ЧЕ. 
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4,11 


ЖЛЕ 424,4 的 出 算 程 语 ， 利 用 该 程序 汁 算 Ax = AFx 的 前 本 人 


ERRER, MR A. IEA, BY) 


10, 


о о а) 2197. ook ТА 
2 12 12 s. V яс а 
Ае з 1 11-1) Ва: -1 118-1 1 |. 
р. с 2-1-1 12 -1 | 
T Kera 362 ©} 1 1-1 HZ 


$ я х R 
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PLE ”线性 最 小 二 乘法 


在 测量 平 差 、 数 据 带 近 以 及 正 态 分 布 有 关 的 统计 等 问题 
中 ， 孝 需要 考虑 确定 一 个 向 量 x， 使 函数 
p’ (x) = ||b — Ах||° 
达到 最 小 的 问题 。 其 中 4 是 一 个 m x n АВЕ, b E: m 38: 列 向 
量 ， 这 个 问题 称 为 最 小 二 博 法 问题 。 本章 将 通过 对 最 小 二 乘法 
的 讨论 来 介绍 到 x 于 矩阵 的 奇异 值 分 解 以 及 广义 道 矩 阵 的 其 些 
概念 和 有 关 的 递 推算 法 ， 


51 线性 最 小 二 乘法 问题 


在 某 些 实际 问题 中 磁 到 的 线性 方程 组 4x = 往往 无 解 ， 即 
找 不 到 一 个 向 量 x。 (Ах =5， 此 时 只 能 海 问题 合理 地 改 为 : 
寻找 列 向 量 x 使 2* (x) = jb- 4x 达到 最 小 .即使 剩余 向 量 的 
模 的 平方 
iiri” = lb - Axil: (5.1.1) 
AER. ETRA шиг EHTA, PARTAR 
个 问题 为 线性 最 小 二 乘法 问题 。 而 把 使 (5, 1. DAA 最 小 
BU x 叫做 
Ах =} (5.1.2) 
的 最 修 二 乘 解 。 
Ry o аве а 为 


b. 
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ЖЕНЕ АСЕ" ", JA 的 定义 豆 以 仿 方 阵 的 2 ЯЗ 
数 定义 ， 定 义 为 
ПА = All I = Мах (Аж / 115), (6:1:3) 
可 以 证 明 它 具有 下 列 性 质 :， 
1) ПА = A A 的 最 大 特征 合 ; 
2) АТ = А1; 
3) JATA] = 141°. 
对 于 满足 方程 组 
Ах = 0 | 
的 所 有 x 组 成 的 空间 称 为 4 的 零 空 间 , 记 为 N(A), 它 的 维 数 记 为 
null(A)。 以 后 也 用 R(4) 来 表示 4 的 列 向 量 张 成 的 线性 空间 ， 
定理 5,1.1 使 人 65.1.1) 达 到 最 小 的 线性 最 小 二 乘 解 总 是 存 
在 的 ， 而 且 解 叭 一 的 充 要 条 件 是 nuli(A) =0 
证 明 根据 线性 代数 的 知识 ，58 可 唯一 地 分 解 为 
b=b, +b,, 
其 中 by CR(A), Ъ,СЕ (А), RRO RARES 5 а, A 
为 Ax ER(A)， 所 以 - AXER(A), igb- Ax 有 了 唯一 分 解 式 


b- Ax =b, +b, — Ах, (5.1.4) 
其 中 b, -AXER(A), b, ERL(4)。 从 而 可 以 得 到 
lb – Ах\\® = 16, - Ах||®+},!!?, | (5.1.5) 
由 于 5 ER(4)， 所 以 线性 方程 组 
Ах =Ь, (5.1.6) 


必 有 解 ， 设 解 为 x ПЫ, - A x = 0， 于 是 对 任意 向 量 x 均 有 

ib- Axl? = jb, — Axi? + lib, hb’ =b- Ах |, 
这 就 证 明 x 是 (5.1,2) 的 线性 最 小 二 乘 解 ， 从 而 证 明了 线 性 最 
小 二 乘法 问题 总 有 解 ， 


设 *o 是 方程 组 (5,1,6) 的 任 … 解 ， 则 (5.1.6) 的 所 有 Wg 的 
集合 可 以 表示 为 x, +NI4)。 由 此 可 得 ， 如 果 null(4) =0， 则 
《5,1.6) 的 解 唯 ……， 和 否则 ， 又 可 得 ‘5,1,6) 的 解 不 唯一 ， 从 和 而 证 
朋 了 (5.1.6) 的 解 唯 一 存 让 的 充 贾 妹 件 臣 null(A) = 0, 

定理 5.1.2 5,1.2) 的 线性 最 小 -和 蒋 解 是 方程 组 

АТАХ = АТЬ (5.1.7) 
的 解 ， 反 之 ， 方 程 组 (5.1.7) 的 解 中 (5.1.2) 的 最 小 二 乘 解 ， 

证 明 iz b- Ax=b, +b,- Ах, ИНЬ, ERCA), b, СК 
(А), HEGDE DIRE, ДИНА х =b, NÑ 
№, b- Ax =b-b. =b, СКА), XE TE (А) = МСАТ), @ 
b- Ax =b, СМ(АГ), ВАГФ-дх) =0, 从 而 证 明了 x 是 
程 组 (5.1.7) 的 解 。 

反之 ， 若 x 是 方程 组 (5.1.7) 的 一 个 解 ， 则 必 有 

Ab- AA x =AT(b-Ax)=0, 
因此 ， 
b- Ax СК: (А), 
但 是 ，b 一 Ax =b,+b -AÀ x, ЕШЬ, - Ax CR (A), b, € 
R+(A)， 根 据 b - Ax 在 R(A), КАСА) 上 分 解 的 唯一 性 得 到 
b -Ax=0，,， 于 是 x 是 (5,1.2) 的 线性 最 小 二 乘 解 。 

定义 5.1.1 方程 组 4A7Ax = Arb 称 为 线 件 最 小 二 乘法 问题 
(5.1.1) 的 法 方程 组 . 

由 定理 5.1,1 和 定理 5,1,2 JAL 4m x npk A BJ 2 [Н] 
N (A) 的 维 数 满足 null(A) =0 时 ， 线 性 最 小 二 乘 解 才 是 唯一 
的 ， 即 和 的 列 线性 无 关 时 才 有 唯一 的 x 使 (5.1.1) 达 到 最 小 ， 
ХЕЙ ЖА т >п, ME АТ 4 是 非 奇异 阵 , 因此 ，474 是 对 称 正定 
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ep TE s т. 


的。 所 以 ， 在 nall(4A) = 0 村 ， 求 线性 最 小 二 乘 解 问题 可 以 化 为 
解 系数 阵 为 对 称 王 让 阵 的 法 方 理 组 (9.1.7) 的 问题 。 至 于 пиц 
(А) 0 的 情 疯 ， 线 性 最 小 一 乘 靶 癌 题 的 求解 就 变 得 复杂 T. 
TRE ЖЖ ТТЕ. 


52 法 方程 组 的 解法 


本 节 主 更 讨论 方程 组 (5.1.2) 的 系数 阵 4 的 列 向 量 线 性 无 
关上 时 (简称 列 满 秩 阵 ) SJ Br J R 解 。 此 时 ，A74 FE 3E 8 Pë 
陵 ， 从 而 方程 组 (5.1.7) 的 解 可 表 为 

x= (ATA) АТЫ, 
Же _ | | 
A* = (АТА) AT, (5,2,1) 
ШЖ ЖБИ: 4 ' ХА RJ Moore-Penrose ГУ Н, RIE, 08678 
ЛУЗЕ пр 3k 29 
х= 4+, (5.2.2) 
2.1 法 方程 组 的 性 态 

为 了 选择 法 方程 组 的 合适 的 求解 方法 ， 应 = 对 法 方程 组 
(5.1.7) 的 特点 进行 研究 。 

形成 法 方程 组 的 系数 阵 ， 需 做 第 阵 乘 积 47 4， 这 不 仅 要 
花费 很 大 的 工作 量 ， 而 且 由 于 售 人 误差 的 影响 还 有 可 能 破坏 
АТА 的 正定 性 。 其 次 ， 线 性 方程 组 (5.1.7) 往 往 是 病态 的 。 例 
如 ， 给 定 12 个 点 

{(—-6,уУу), (—5, y), ++, (—1,%%), (1, Уу), +e, (5, 
Pada (6, ?要求 确 定 一 个 8 次 多 项 式 

у(х) =@,+а@а,ух+а„х? + w +a, XŠ 
EO — y) АЮ Лу, XX aE ЕН 
Cga=y, 
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其 中 
“1 x, XY == xÉ | 


l Xa хр се Xx; 


1 хуз Xie Sor х; 
Ша = (01,91, ea) T, у= (Ур, 7， 相 应 的 法 方 
程 组 为 
Стба = CTy, (5.2.3) 
СТС = (с), 由 方程 组 15,.2.3) 的 做 件数 估计 为 
CC 的 最 大 特征 值 


Спі (СТС) = сотсуз у ин 719651011. 


显然 ， 本 合 中 的 法 方程 组 (5,2.3) 号“ 病态” 的。 因而， 用 一 8 
的 方法 去 解 (5.2.3) 将 得 天 到 满意 的 结果 . 
为 什么 法 方程 组 (5.1.7) 往 往 是 病态 的 呢 ? 现在 仅 就 方程 
组 (5.1.2) 的 右 端 有 扰动 5b 的 情况 米 进 行 寺 论 。 
设 方程 组 (5.1.2) 的 右 端 由 b 变 为 b+ cb， 此 时 (5.1.7) 的 解 
变 为 X%+ ox, H 
АТА(х+@х) = A7(b+ eb), 
于 是 有 ATAdx = Атев, Bh 
бх = (474)-1476b= д*дЬ, (5,2,4) 
定理 5.2.1 若 (5.1.2) 的 矩阵 A ЖУ EE, H b,=0, 
则 ` 
Тао < Cond (А) але (5,2,5) 
Жтр Солі (А) =I A+A 
证 明 —óbfrR(A) 和 R+ (A) 上 的 分 解 为 
Gb = 8b, +6b,, 
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Шар, ERCA), 6, ERT(A)=N(A7), DI 
Ateb = д? (Gb + ób,) = A'ch + CATA) А76; = 4*0Ё,, 
因此 


ateb! = кав, 14+ 1166,11. (5,2,6) 
J#E(5.2,2)#H (5, 1,6) u 48 
AA'b=b,, 
于 是 
lb. |= АА +В АТАРЫ 
о (5,2,7) 
H: Pb |50, (5.2.7) (5.2.0 1521 
atob] _ +j | 162, | lób, ||. 
-一 全 一 А р. =- = Cond (А) - з 
人 ЙБ ° 


(5,2.2)，(5.2.4)，(5.2.5) 表 了 明 ， 当 (5.1.2): 的 右 端 有 
扰动 68 时 ， 最 小 二 乘 解 x 的 相对 误 半 界 为 
el < Солі (A 
该 式 的 右 端 是 b, АУАНЫ 25, Ап, 24 (5.1, DA b 36 E 
时 ， 解 的 变化 主要 依赖 于 b; 的 变化 。 
定理 5.2,2  ЕАСК"* "И ЕЕЕ, W 
Cond(4T4) = (Cond(A))°2, (5,2, 8) 
其 中 Cond( ATA) = |АТА| (АТА) |, 
证 明 因为 |4l = 1А?А| =! АДАТ, В. 
可 + = (АТА) -!АТ?, 
所 以 
| 
= (АТА) АТА(АТА) |= (АТА) || 
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Cond(ATA)= | АА: (АТА) li = АЦА" 
= (Cond(A)) 2, 
定理 5. 2. 2 指出 ， 法 方程 组 (5.1.7) 的 系数 矩阵 的 条 件数 是 
原 方程 组 (5.1.2) 的 系数 筷 阵 A 的 条 件数 的 平方 , 即 原来 不 太 病 
态 的 问题 ， 爷 为 法 方程 组 后 ， 变 得 “惊人 ”地 病态 了 。 因 此 必须 
采用 具有 更 高 数值 稳定 性 的 方法 去 求解 。 
2.2 正 交 化 方法 
线性 代数 中 所 介 织 的 Cholesky 分 解 是 把 一 个 对 称 正 定 阵 
进行 三 角 分 解 ， 肯 将 它 应 用 于 对 A 4 的 分 解 上 上 ， 即 得 
АТА = ВТК, (5.2, 9) 
#rh R х n ЧЕР Е, НЕСЕ. ЖЕ 
ЗЕ (5.2.9) -A ШЖ ФО = АК-!, Д] 
A= QR, (6.2.102 
而 且 QTQ =R ТАТАВ 1=R'TRIRR =P, О IE 3 £, 
对 于 列 满 秩 阵 A ， 其 QR 分 解 可 由 Gramm-Schmidt 正 交 化 
过 程 实现 .并 把 这 个 正 交 化 过 程 简称 为 G-S 过 程 。 设 
А=[@,, а,, ++, GJ, OO=[qg Ф, з, 9]， 则 G-S 过 程 的 
具体 步骤 如 下 ， 
Da 标准 化 ， 作 为 如 的 第 1 Figi Вр 
q, =G,/r)15 r. = а, |; 
2) = 2,3, m, J PIAA REBOLA Pq к, В 
bsar- У)": ri; = (qd;, 4,), 
(= 1,2, k- 1) 
к= 0,7 Рак = 1031. 
13 ЖНІАЧ 1, Qos сз, ФАИ ТЕУ ТЫҢ, W F phu] 
A5 яг FER: 
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Ql =P gi’ 
.=r agi + .42 ， А 
(5,2, 11) 


g, =F, nq 一 ng， + aa +r,xQ,. 
Fr O. 2.11) 3 pK ЯН ОЕ, Б дА = QR, 其 中 


Е БЕ “эз Fin 


Q HEZE. 

将 分 解 式 (5,2.10) 代 人 方程 组 (5.1,7)， 得 到 

RTQTORX = КТОТЬ, 
由 于 R ЕЕ, ЭТЕЕК), Ше ЗЕТ ЕХ 
两 端 ， 得 到 
Ех = ОТЬ, (5.2.12) 

ЮЕ, ЖЕ ОЛ, HODEIA EJ EIB (5.2,12) Ят 
端 硕 ， 然 后 解 出 此 三 角形 方程 组 ， 即 可 求 得 最 小 二 - 情 解 %。 

实际 使 用 G-S 过 和 构 时 ， 由 二 8 的 列 是 由 和 的 列 的 线性 组 合 
产生 的 ， 一 般 说 求 ， 伟 人 误差 较 大 ， 以 致 严重 地 影响 & 阵 的 ЈЕ 
交 性 ， 从 而 该 算法 的 数值 稳定 性 可 能 由 差 。 为 了 提高 算法 的 精 
度 ， 将 G-S 过 程 进行 适当 修改 ， 便 得 到 毛衣 * 修 改 的 CG-SLE 交 化 
м”. 

算法 5.2.1 修改 的 Gramm-Schmidt 方法 CMG5S J 法)， 


其 体 步骤 如 下 ， 
1) Xfk=l1,2;, "n-li, 做 
1.1) q<x=0Gy/Vkks Ккк = | aglls (5.2.13) 


1.2) 对 = 天 + er K 


• 164 • 


1. 2. 1) й 4-0,7. 30 > ИТЕ: (qn @;) (5,2.14) 
1.2.2) NEXT j, 
1.3) NEXT k, 


2) EQ = (qi... q,), R= istefa), (5.2, 15) 
к= (Ру Таре урур 0, s 0), 
3) 解 方 程 组 Кх-0?Ы, (5. 2, 16) 
4) 输出 x=R QTD. (552,17) 
2.5 ЗК 


我 们 知道 ， 正 交 变 换 下 人 在 和 何 向 量 的 欧 氏 模 是 不 变 ВУ. IN 
№, ЖОЕ 66, 那么 
[2 — Ах| = ||Q (b — Ax) || = |О2-ОАх|, 
TER x 10 – 4xli 达 到 最 小 的 问题 与 求 x 使 1Qb -@Axll 达 到 
最 小 的 问题 是 等 价 的 ， 其 解 均 为 最 小 二 乘 解 。 
根据 第 一 章 83 的 理论 ， 当 A 是 列 满 秩 矩阵 时 ， 存 在 正 交 阵 
Q, & 


QA= `, (5.2. 18) 
0, 


= рр, -Ех)Т(ф, — Rx) + b7b,J?, (5.2.19) 
ЮЖ, Ь,-Кх=0 的 解 便 是 使 (5,2.19) 这 到 最 小 的 最 小 二 乘 
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— 因此 ， 不 雳 要 解 靶 方 程 组 (5.J,7)， 而 只 需要 解 -- 次 三 旬 
方程 组 RX =b， 佑 可 求 出 线性 最 小 二 乘 解 。 
在 人 为 列 湛 阵 的 情况 F， 使 用 正 交 化 方法 或 镜像 变换 
解 “ 矛 盾 不 太 大 的 方程 组 > 时 ,中 于 O 
RTR т 示人 下 
тооке 
Ё ОТОК ЖЛЕ ШЕШ 
о 
ВОГО, АА ЬН AENDRE, IS 
EAU UTAR Rh RE, - 般 来 说 是 可 以 获得 比 
较 满意 的 结果 的 。 使 用 正 交 化 方法 和 镜像 变换 法 解 矛 盾 方 程 组 
WRR HE, HUSE Stewart 沙 的 "矩阵 计算 引 论 ”第 五 章 。 


33 奇异 值 分 解 及 广义 逆 矩 阵 


前 画 我 们 研究 了 在 null CA) = 0 时 求 Ax =b 的 最 小 二 乘 解 问 
Rü, 当 nullCA) = 0 ВВА ПЕ г<», Ах = b 的 最 小 二 乘 解 
ине A 法 工 都 将 更 为 复杂 ， 为 了 对 大 
者 进行 较 详 细 的 研究 ， 本 蔬 将 引进 奇异 值 分 解 和 广义 六 算 阵 健 : 
概念 ， 
5.1 奇异 值 分 解 
引 理 5.3,1 SESA CR" ORO r, MIEHET 38 28 F 
ОЄЕ""", VER"", 使 | 
A 2 
ЖЫР О} (5.3.1) 
Hp A ЧЕ ЕР Bt F = fa £, 
证 明 ”对 于 秩 为 + ЯНЕ AER""， 存 在 正 交 阵 @ 和 排列 
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ШЕР. РАО ЯЕ ОРА” "К" 

РТС ҮЛ 

0 0 } | | 
Яд, Ег ИАЕА ЕЕЕ, Аз” Xx 一 六 和 矩阵， 有 
Аһ 0 

An 0 |- 

ХЕ МАЕ ЕАО СК""", (Е 


ОАР | 


ОАР) = | 


po 
Жз 


goap =| 


0 
0 |: 
Hp anir ЕРА EAE A 


ёла» R ЕУ N А 0 
(TEAT = | | 
{} 0 


BD 
A 0 
Q 01: 
4 Q =U，PBI=Y。 因 为 Q，8，P 均 为 正 交 阵 ， 所 以 U, 
УШЕЙ, НАЯ FROR”, (Ë 
viav=[ 人 | 
п 0-4 
Hp adr ЕАН КЕЕ. 
定理 5.35.1 А СВК" "ЈК r, MU mp F 32 Е 
оян Е V, # 


ourzr-| 


ОТАУ =D, А = ОЮУ", ` (5,3,2) 
р, 0 | 
al |. D, =diag(u,,B i, 6 1), 
0 0 


其 由 ;=v A, + IA тА ее 24,220 ЖАГА ВЕЗЕ 
的 全 休 。 
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证 明 ”由 引 理 5, 3. 1 知道 ， 存 在 正 区 阵 了 和 和 使 
| е А 0 
| ОТАЎ p Н, 
其 中 妨 是 7 ИЗЕУ Ер. Nit АТА ЖК 阶 对 称 正定 阵 ， 


从 而 存在 正 交 阵 只 使 
ATA = V,A,VI 


А, 


. ДЕ.) 
这 里 А, 22А, 62А, 208 ATA 共 / 全 部 特征 信 ， 它 们 也 是 A7A 
的 非 等 特征 值 。 令 


H, ! 
D, = i › Kav hi (T= 1,2, °° r) 
И ГА 
U,=4V.D;?, (5.3.3) 


| 
UTU, = (D; Y TVT aT AV, р;! 


=Di'VIV,AVIV.D;! = D !A,D;1= I, 
ВПС, Б ЗЕ , Ku 


v=" 0 |: v= o] 


9 i 0 Ts r 
分 别 为 m 和 n 阶 正 交 阵 、 又 由 人 ‘5.3.3) 可 得 
UTAV, = Р, 
СИ _ = = A 0 === 
及 vorapv=U | ] 
0 0 


.rUTAV, 0 D, 0 
8 ш 
0 0 0 O 


500-0, V V =V, 0, УЙ ЕКЕЖ, E. 
ОТАУ = m 2 1. 
0 0 
Жр, = diag(H., Hg, en, u), 

定义 5.3,1 j EBE AER” ”的 秩 为 r，A7A 的 非 零 特征 
HRA, 22666 224220, ЩИ = д (= 1, 2,666, r) #k 25 A 
HARE, ER A= UDVT ЮА 的 奇异 值 分 解 。 

在 A ВУЧНА = Ору, р 是 由 4 的 奇异 值 叭 一 确 
定 的 ， 但 是 正 交 阵 U 和 VV 的 选取 却 不 是 唯一 的 。 当 A'A4H 有 重 特 
IEE r EESE, 的 选取 就 不 唯一 ， 从 而 U 和 VV 的 选取 也 
就 不 只 一 。 当 矩阵 4 是 对 称 阵 时 ，4 的 奇异 值 就 是 它 的 特征 值 
的 绝对 值 ， 

有 了 引 理 5.3.1 和 定理 5.3.1 以 后 ， 我 们 就 可 以 在 -一 般 的 情 
次 下 来 讨论 最 小 二 乘法 问题 的 解法 了 。 由 于 

10 - Ах = [076 - U” Ax|| = [070 - UTAV V x|| 


| A Ü 
= Urb - | Ју", (5,3,5) 
0 O 


с. , 
А с=т= [| |: y=vr|= [> |: (5.3.6) 


35 (5, 3. 0 Ç A (5, 3,5) AE] 


p-a le ]-[ ET 


АН р 
‘Le,., 


因为 A 古 韭 奇异 的 下 三 和 角 阵 ， 所 以 方程 组 


] = е, лу, |> + e, 1°. 
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c,- АУ, = 0 09.3.7) 
НЕ y. ， 令 


а {= 
x= v 7, 


a 


一 — ? (5.3.8) 
e Vn 2 


Яру, (о - r) ЕПУ, IH-F 
[b – Ах 22210... 10,- ДУ, + (6а: 17 
=|b-Axl `, 
рх 05.1.2) 0 / ORR. 
如 果 取 y。， = 0， 令 


xvay 7, p (5.3.9) 
06; 
ni 
З = а Е е. 
12| Е! i : = (х, + X, im i= xj, 
ESE И 


ВЕЕ (5,3,9) ЯЕ А ВЕЕ RAR. 
如 果 用 4 = ОРУ К A (5.3.5) Б, MEE 
|b ~ Ах! = IUD- ОТОрутх | = Ub - DVX"! 
(5.3.10) 
E (5.3.6) А (5.3.10), A 


ы ¿4 


=!е,—Ю,у,|* + а 
类 似 寺 前 面 的 讨论 ， 可 以 得 到 (5.1.2) 的 向 量 模 最 小 的 最 小 二 


w уГ ур | 
х= y| ,J]=r[ JE] 


D;! 04 
= v| |. (5.3.11) 
0 0 | 
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从 这 个 赤 达 式 中 ， 我 们 可 以 在 到 (5.1.2) 的 最 小 一 乘 解 等 F E 
阵 


Di! 9 
vÍ |! (5,3.12) 
0 0 


与 列 向 量 5 的 乘 科 ， 而 矩阵 (5,3,12) 5—5 | д 2° # lj 
样 的 作用 ， 我 们 也 称 之 为 鼻 的 广义 逆 扎 阵 ， 
5.2 TEER 
EX 5.3.2 FER AER”™"， 当 在 在 满足 如 下 四 个 条 
Е ( 称 Penrose $t) RJ nx т ХЕ, ХАГ ХАБ 
阵 ， 沁 为 A! 
AXA= A, (р.) 
 ХАХ =Х, (р,) 
 AX= (АХ)Т, (ру) 
ХА = (ХА), Pa) 
根据 广义 道 窍 阵 的 定义 ， 显 然 它 县 有 如 下 人 性质， 
1) (АА) = A'A; 
2) (АА?) °= АА’. 
定理 5. 3.2 设 知 陈 AER"™ "的 奇异 值 分 解 为 


D, 0 
А=П1Юу?, p=| }, 
0 Ü 


则 
-1 0 А 

X = v| 0 Ju 

为 和 4 的 广义 逆 抢 阵 A4A ， 而 且 是 唯一 的 。 


ER K% 
Рр; 0 D; 1 Ü 
АХА = avf | А = оруту[ [отуру 
0 0 0 0 
= UDPDY- =А, 
+ 171 . 


р;! p: 


Р 0 К Е 0 
ХАХ = v| | іл upyry| Ju: 
ü 0 Q 0 


р; 0 
=v| Jr = x, 
0 
故 
TD- 1 1, 0 
АХ = ругу 1-0] |= (АХ), 
0 0 0 0 


类 似 可 证 XA= (XA). 
PRE X ж АМ XARA HB 
п; 03 


А` =v| |”. (5.3. 13) 
0 


0 
ХХ НЕ O) ~ (р) BJ)” УБ, ШЇ 
X=XAX = ХАХАХ = ХАХАХ)" 

= Х(АХ) = ХАХ = ХАХАХ = (ХА) XA)" X 
= (XAXA) = ХАХ = X. | 

以 而 证 明了 4’ 的 存 丰 和 唯一 性 ， 
MATU АВНА ЛИЕ Е ЯТ 

D:: O 10", 

0 0 

ERRI ТА РАЧЕ MEDIKI IESE ВЕ U ЯП V 的 选取 ， 
推理 1 А СА" ТЕРРА, Hi АТВ М 

Ш) T. ВЈ] 


A` = v| 


(A)! = САГ), 
y D. 0 
证 明 设 A=UDY", р-| | 
0 0 
|] 


Я Р Э Чулу. 
А! = VDU" = v| l. 
о 0 
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从 而 


-1 | D-! 


Р; 0 с 0 Т 
Tyt T T T: T 
Аа, =el, 510°) 
Е ASG 
ВП И i 
(Ay = (A), 
推理 2 (A `) =A,. 
其 证 明 作 为 习题 。 
ЩА ИКЕН, 可 以 证 明 $2 НУГУ УЛАН 47 
= (АТА) АТ УК ЕГО А H. — P: PJ, BH 2 
= A`. 


定理 5.3.35 ЖАР Б ЫШ, UH 
(ATA) lAT= А'; 
FA EIPRE, U 
AHAA T 4°, 
根据 定义 5.3.2 和 定理 5.3.2， 只 要 证 明 (ArAh) IAT 满足 
Fenrose 条 件 就 行 了 。 具 体 证 明 作 为 练 却 。 
推理 1 ЧАЮУ, АА = 1 ЩА ITW Ek Е 
RF, ЗАА? =L 
推理 2 юу ЖАЛАП, ША = A, 
“НОЛАН ГАА 的 推广 。 
定理 5,3,3 指 出 ， 关 AERrx" 的 秩 为 na 或 m 时 ， 广 义 道 矩阵 
可 以 表示 成 另 一 种 形式 。 潮 在 我 们 将 讨论 当 秩 为 上 村， 如 何 jH 
ЖА 05.3.1308 ЕК ADU ХА КНЫН. ЖИЕНИ 
т F 9 ШИ. 
定理 5.3,4 对 于 秩 为 а ои 3 УТ 
EE: век"^"уТКЕССЕ""", 使 
A= ВС, 


* 173° 


证 明 IFIED reo 的 逢 阵 '4, А {ҮЛЕ РЕ Р ЯПО iE 


L G 
РАО = ° (5.3.14) 
ЕТ 
' 其 中 了 ,是 r 阶 ë EBE, iz 
| С 
Р-!= ВВ], Q = — 1， 
E 


于 是 有 
А=рР!(РАО›)О”' 


_ [L ore 
=[B В] [, И MEZ 
因为 P 的 m 个 列 线性 元 关 ， 而 B 是 由 P ”中 的 r 个 AR, 
所 以 B 是 列 满 秩 阵 ， 同 理 C 是 行 满 秩 阵 . 
定义 5.3.3 对 秩 为 0 的 矩阵 A ER"”*”， 称 分 解 式 
A= BC (5.3.15) 
为 A 的 秩 分 解 式 ， 其 中 日 和 C 分 别 是 列 满 秩 阵 和 行 满 秩 阵 。 
定义 5.3.4 #A=BCE3E2AEEEA 的 秩 分 解 式 ， 则 
CT ССТ) -1(B7B) IB" (5.3.16) 
ПА ВГ ЖЕ ВЕ. 27А = О, ШО ЖАШ АЕ 
阵 、 按 定理 35,3.3 的 记 法 ，(5.3.16) 可 以 写成 
С'В', (5.3.17) 
定理 5.3.5 А ЊВ CBE Penrose Ж} (Р;) 
~ (P). 
证 明 1115 X=C'B' Д] 
АХА = ВСС (CC!) `'(В'В) ВВС = ВС = А, 
АХ = ВСС! (СС?) (ВТВ) В = В(В'В) BI 
= (ВОВ'В) BD) = (АХ) ', 
ВЕ XAX=X, ХА= (ХА)', 
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HFAA, RAP Penrose 条 件 (Р) ~ (P) 的 广义 
Е ЕЕ ВУНЕ, ЯТЫ ВЕ CB 可 记 为 


А`= СВ“, 
Вр 
D;' 0 
c*B* = v[ Jur. 
0 Ü 
5.35.1 Ж 
х-у= 一 1， 
: x-y=l, 
.2x—y= 0 
KR RR. 
W iz 2. = 1 
B= ] — 1 多 
“2 =1 


TR BATA 2， 所 以 


-1 -1 2 
B* = (BD) В" = >| | 


-2 一 2 2 
于 是 Ü i 
(х: 1. 7 -1 -12 —1\ :0 | 
А 1 us Е 
i ру. у | 1 j 
У: 0 (ә 2214 0. ЖОЛ, 
例 5, 3.2 Ж Ax= 0 М) ЛАВАЛ ЕАН, ЖШ 
ы. 2 ES “| 
Аж жїз Е" 
| : | 
v e e, . I? 
W 显然 4 的 秩 为 ?， 它 的 一 个 秩 分 解 为 
Ж) 
1 11 
A= = | 1, 
Ж 2 -1 01 


ызы О = Tuz 
= (B! В) `:B: = Al |: 
212 -22 
3 5 
+ 、 T T ss 38 = | 
人 4 
5 —1, 
3 5% 
EE i -1 I~ “| 
С 14! Йй 2 —2 2 
\5 -1) 
| -13 -13 16 | 
1 
28 2 2 4' $ 
K n С, 
于 是 所 求 的 解 为 
13 —13 16 NË J 16 (4 
28| ИІ | 28 Тре 
0-3 -3 8h 17 8 2 


ИШИП УЖЕ ЖАНУУ ЖЕҢ Ах = b 的 解 及 线性 最 
二 乘 解 的 一 般 表 达 式 。 
定理 5. 3.6 线性 方程 组 4Ax =b 有 和 解 的 充 要 条 件 是 


AA-b=b (5, 3. 18) 
当 方 程 组 有 解 时 ， 它 的 通 解 是 
x= A`b+ (1- A*A)Ë, (5.3.19) 


Ht ê EEE n 维 列 向 量 ， 

当 方 程 组 无 解 旷 ，(5. 3,19) 是 最 小 二 乘 苇 的 通 解 (可 理解 
为 对 应 法 方程 组 的 通 解 )， 取 <= 0， 即 得 模 为 最 小 的 最 小 二 乘 
解 A'b. | 
证 明 D 洪 方 程 组 有 解 ， 即 存在 使 Ay =b， 由 于 A= 
AA:A, Ж 
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b= Ay = АА Ау = АА, 
Вр (5.3.18) R. BZ, E AA'b=b, WJ A'b=x 8 E--- 
#1. MITER Т o R ДЕН +8 28 YE E: АА*Ь = b, 
2) XERA, х Ab 是 CEJ- ez, H 
在 要 证 齐 次 方程 组 4x = 4 的 通 解 是 
х=(1-А'А)ё 
К £ RFE n SE SUT] Et, 
因为 Ах =AG-A:tA)Ë= (A- AA:A)8 = 0, 
Ж x= П-АА) В Ах= 的 解 ， 另 一 方面 ， 4x = 0 的 任何 
解 x 可 表 为 、 
х=х- AtAx= ({- А*А)х, 
又 满足 上 式 的 天 必然 满足 Ax= 0， 从 而 证 明了 Ax = 0 的 通 解 是 
x = (1-A'A)E 
Hp £ EIEE n ЭШ, ZZ ЕКИ, Ах= 0 的 通 解 为 
х= Аё + (I -— AtA)8. 
3) 根据 定理 5.1.1 和 定理 5.1.2504, EIRENE 
解 ， 昌 其 解 必 为 法 方程 组 
ATAx= A 
的 解 。 由 2) 知道 ， 该 方程 组 的 通 解 是 
х= (АТА) АТЫ + [7 – (АТА) САТА) ЈЕ, 
ЖЕ EETA n УПА, 
А 的 奇异 值 分 解 为 4= UDVT, W 
АТА = VpUTUDVT = VD'VT 
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是 A74 的 奇 孚 值 分 解 ， 所 以 -1 2 
(АТА) * sy” 17 Hg 
于 是 аа “| 


(АТА) А =V Á VTV DUT 


рг 0 i 
| 0 A | 
(АТА) (АТА) = (ATA) А!) А= A'A, 

改 法 方程 组 的 通 解 是 

х= A'b+ (!- А'А)#Ё, 
ЖЕ Е n PETER, 4 6= 05, х= Ab， 由 广义 逆 搜 阵 
的 唯一 性 和 (5.3.11) WAL x= A'b ЖЕП ЕВА ДЕК 
二 乘 解 。 


$4 ”广义 道 矩 阵 的 一 个 递 推算 法 
4.1 对 称 分 块 矩 阵 A 的 求 道 
设 对 称 分 块 矩阵 为 
AE a 
| R Q 
ЖР, ОХНА H WEEP 1. ACFE. ШЖ 


` b 
R ОДЕР (5,4,1) 


|] š i T |, (5.4.2) 


则 


将 (5. 4 1 写成 拓 阵 方 各 组 的 形式 ， 有 


Px, + В'х,= 0, (5, 4,3) 
ТОКЕ =, . 6,4,4) 

类 羽 于 解 二 元 一 次 方程 组 那样 ， 由 (5,4,3) 可 得 | 
x.= -PHIR S = 0,), (5.4,5) 


将 (5,4,5) 代 人 (5.4.4) ， 化 简 后 可 得 
| (Q ~ RP-IR7)x。 =b,- RP )b,, 
由 于 它 的 解 存 在 且 唯 一 ， 所 以 | Б 
х,= – (Q -RPR RP 'b, + (Q — RPR”) b. 


(5,4,6) 
令 Z=(@-RP-IRT) -5 Y = -7ЕР^!, 代 人 (5.4.6)， -得 到 
x= Yb, + Zb, (5.4.7) 
J8(5.4,7)14& A (5.4. DER, {БР 
x,= (р! ~ PiRTY) bp +Y be。 (5, 4, 8) 
令 W=P>-P RIY, {ЧАД (5, 4,8) 188) 
x, = Wb. +Ү7,, | (5,4,9) 
将 (5,4.9) 和 (5.4.7) 写 成 矩阵 形式 ， 即 得 所 求 的 解 
x УУ Ү77 rb 
К x ] аР (5.4.19) 
EEX (5, 4, 10) ЖП (5. 4. 2) {5 F 
Г o] PM 21, (5.4.10) 
其 中 у= (@-вр`А?) 5 
| Y= - 7RP`!, (5. 4.12) 
W=P -PRIY， 
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从 (8.4.12) 我 们 可 以 看 出 ， 分 块 求 逆 的 方法 是 ， 先 求 出 
P 1, EX (Q - RP-IR7) 求 逆 ， 然 后 利用 矩阵 的 乘法 求 得 》 和 和 
WW， 由 此 便 可 得 到 A 的 逆 逢 阵 A， 


例 5.4,1] Ж 
A= |? К 
RQ? 
其 中 | | 
оа фе 4 | 00-10 
| 0 3 0-1 00 0—1 
р=0= | |, R= 
-1 0 3 -1 оо оо 
ТЕЕ. | 0000, 
ЖА УНА 1, 
: 解 i 
w YT 
asje ;J 
Y Z 
由 已 知 条 件 先 求 得 
А3 ¿21 :] 8 3 “83249; 
1. 121 3 8. | 1 389234: 
P-1= 一 了 ， RP l — 一 -一 一 一 | 
55' 8 324 9: 55 0000 
. 3 8 924, 0000, 
8300 
313800 
RPR = > с 
55 0000 
0000 


“963 127 377 1685 

1 , 127 963 168 377 
5 2071 377 168 939 369 ` 
158 377 369 939, 
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147 74 441 213、 
Y= -ZRP-I= l. 71 147 213 441 
2071 | 64 45 192 185 | 
45 64 135 192! 
HYERA Y, 

/ 816 56 377 168% 
1 | 56 816 168 377. 
2071 3177 168 1131 504 Í 
l 168 377 504 11312 


由 以 上 几 项 ， 从 А-1 (9 可 得 知 。 
4.2 ыы e 
引 理 5.4.1 15 


其 中 了 是 nn 维 行 向 量 ，C' 是 nxr Be, W 
(ВС)*=С*В'*, 
ЙЕ 1#ВС=А, С*°В'=Х, HR E 48 
ВТВ = І, + (РС*)ТРС*, (5.4.13) 
因为 8 是 列 满 秩 阵 ， 所 以 B81B= 了。 因此 ， 
XA= C*Bt (ВС) = С'В' (BC) (ВС) *BC = C*C (BC) * BC 
= CT (C*)7TCTBT ((BC) *)7 = CTBT ( (BC) +)" 
= ГВС)? (ВС) ТЇ = (ВС) IEM = ATA, (5,4,14) 
于 是 
(ХА) = (4 4) = AtA = AXA. AAAA, 
= кмш ку ` 
АХ =АА\`, | (5.4.15) 
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于 是 
(АХ)! = (АА*) = AA? = AX, 
ХАХ =С*В*ВСС*'В”*=С*'СС*°В*=С*В* = X, 
因此 ，X = C+B+ 满足 Penrose 条 件 ， 据 定义 5,3,2，X 是 A 的 
ГНЕ, ВВС) = C'B', 
引 理 5.4.2 15 


р O? го 
с" [о А Н! 
HED, ОЛЫ ТК” fg R'*"(t<n) B. DQ = C 为 C 的 秩 分 
Ж. P X)n {т 3E LS QAQ ЯЖ, HBd=p(I-CtC) 


#0, H f | 
А* = (С'-@*рС'@'*), | в, 1.16) 


D OY [Q 
t 
是 4 的 一 个 秩 分 解 ， 且 


5165 9 


证 明 因为 


所 以 只 需求 
[i 
p 
据 定 理 5, 3.3 
Q ООТ Ор! W Y 
І 0057], [оз э] Enr [ус] 
гё ETY, Оту + pTZ]。 (5,4,17) 

由 对 称 分 块 年 阵 求 道 法 知道 : 

Z=[pp -了 CO (QQ) Qp It = [рр ~ рО*Ор'1', 

Y = - 2р" (00') = -2ро*, 


W= (007) ~ – (007) QP Y’, 
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因为 с`С= 9'р‘ро= Q°Q, 


而 且 
(С'С)Т=С*С, 
ddr =р(1-С'С)(1—-С*С)Їр'=р(1-С°*С)рТ 
= рр" - рсС`Ср' = рр - ро*Ор", 
所 以 
Z= (dd7) -i, (5.4,18) 
因而 有 


QTY +р72 = ~Q7(Q*) p (dd) .+p (dad) 
=(I—Q'Q)'p'(ddl) l= (1 -C*C)Tp (йг) -i 
=@Т(44Гу-1=@', (5.4.19) 

(Отуу + PY D = [QT (QQ! -Q (Q007) OpY" 
-PZpQ* ID’ =[G + Q`Qp (47) pQ* — pT(ddT) 1ро` 1р" 
=Q+D' + Q> Qp" (dd) рор" ~ p'(ddry pR +D: 
=С* + C* Cp (dd) рс” — pT(ddT)-!pC* 
= C* 1 С*С)р (dd: ) рс 


= С*+ 47047) рс = С* -а'рс', (5,4,20) 
H (5, 4,17). (5, 4,19), (5, 4,20) 可 得 
十 ~ Q р р" о Ең Т ТТГ Т: D: O 
М |00" + ртутоту +prz3| e | 


=[ (QW + рТүТур*ОТҮ + рг] 
= (С*'-@'рС'4'*), 
引 理 5,4.35 ТАНИ Е, x= (ху, х, s, х,) п 给 
行 向 量 ， 则 
GI +x7x) KT = x (1 + hx 2), (5, 4.21) 
证 明 ”因为 据 Householder 变 换 & ,可 将 任 一 列 向 量 x7 变 成 


Ох! = x е, 
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其 dte жр буд. РАД» 
Q (] +x7x) lx" =Q (I +X XQ Ox 


= [Q0 (+ хх) 1010 = [Q (I + xixy Q1T] Ox" 


= [I+ (Ох!) (Qx T] 1 Qul 
=[I+i ix Pee]! x e 


| xi Ох" 
= ---——-5 ГЕ ‚э 
1+ L% = 


1 r x š 
在 (5.4.22) 的 两 边 乘 87， 即 得 


(T+ XR) IX = ху (1 HIRD a 


定理 5.4. 1 设 CER*'", PER”, H. 


则 
A*=[C' – fpc f], 


r мӣ еН; 
С+ (СТ) ph щӣ= өң; 
&= pI- СС), = (1+ рС* (СТ ph, 


(5, 4,22) 


(5. 4,23) 


ШЕЕ ” 当 6<so 时 ， 设 C= DQ 为 C 的 秩 分 解 ,因为 1+1<<n， 
否则 C7C = [与 4 关 0 矛 盾 ; 而 且 P 与 8 的 行 向 量 线 性 无 关 ， 否 划 ， 


аск!" 使 P=aQ， 于 是 


рс"С= р(0'р'р0) = р(0°0› =а00'0-а0 = p, i Ж 
4671, НО ани, авт д он 


л-[5]-[5 219]. 


根据 引 理 5. 1,2489] 


| Е J (C*-d'pC'd'), 


‚ 184 = 


(5.4.24) 


_—— 


wl 


мё = өй, р-рС*С=0, Blp=pC'C, й 


л= [1] P. [ k= з 


Ж 
| s| .] = Www. 
ЕЕ Jü B£ 
(B, » = | (5. 4. 25) 
ИеТ= (0, D, PRV 与 巨 的 行 线性 无 关 ， 且 
Т ВТ 
[.]- L, iiet 
由 引 理 5. 4. 2 证 明 的 结果 可 以 得 到 
МЕ [(B7)+ — (di7) *of (ВТ) #0817) +] 
Ж + „dt 
[Be = | б ш: (5. 4.26) 
其 中 
4, = а-вв")е= [r - | po] ә[°] 
= | Ее ЕГ (5. 4.27) 
XH T | 
в, Bos] ИГ (5. 4.28) 


比较 (5. 4, 26) 5 (5, 4. 28) 可 得 
4 = (-pC*, р. (5, 4,29) 
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又 由 《5.4, 27) 可 得 
då, = 0 (1 - BB')o= o! d, 


= к: Ев 1-рс`и, 
故 
dt = (414) dT = (- (1-—DpC'u) lu), 1). (5. 4,30) 
比较 (5. 4, 30) 与 (5. 4, 29) 得 到 | 
PC = (1-рС*и) ul, (5, 4,31) 
NR (51,31) 得 
(РС')7—(рС*)'\рС*иш) = u, 
(рс?) = (I+ (PC TPC) My 
| u= [I+ (pc) pc 3-0 (рс`)”, (5, 4,32) 
因为 pC* 是 п TEE, ЕБЕ 5, 4.3，(5,4.32) 林 以 写成 
u=[i+pE* pc) (pO), (5, 4.33) 


又 由 于 了 为 列 满 秩 阵 ， 据 定理 5.3.3 的 掩 论 1 可 得 


了 = В*В= от, | р W +ирс“, 


ВП | 
W = I-—upC*, (5.4.34) 
由 于 
А = ВС 
Н. I 
: в" [с] 


据 引 理 5, 4.1 可 得 
А = СВ = Ct(W,u = С (I —upCt, и) 
у = (С*-С'ирС',С'и),. 
5 
}=С?и=С'{[1+рС* (pct) pet)" 
`жЄ*(рС') [1+рС*'АрС*)]7®=С* (рС')?ЇҺһ, (5,4.35) 


» JBE a 


即 
4+= (С*— fpct, f). 
根据 定理 5, 4.1, E 
i @, ` 
A= t (rh a, жп) 


\ ; 


的 广义 道 矩阵 A*， 可 以 使 用 如 ки. 
算法 5. 4.1 本 算法 可 色 用 依次 计算 Ау=@\. 


м=[ a| юзюни, АННА 


的 广义 逆 矩 阵 A*， 其 具 体 步骤 如 下 。 
1) FAL ADER ERY FEE, 
2) f k=1,2, m 
2.1) Вӧ,=4,А3-1 
2. 1.1) #й=а@,—5Ак-1› 
,2) 如 果 && 关 0， 转 2.。4)， 
2.3) 置 h= (1+5,01) 7, 
2.3.1) 置 了 = Ah-1bhh 
.4) fda), 
2.5) #At=[fAt- — fb, fl, 
.6) NEXT k. сл 
3) ”输出 结果 An。 
本 算法 略 去 了 计算 过 程 中 的 在 凤 技巧 和 计 ил. 
#5. 4.1 ВЛЕЕ КИ ` 


t 


w 


[s< 


+ 


. 40; ° 


ВУЛ БВС”. 
和 解 ” 设 Ci =[ -1,2,1] 
则 


设 [ б, 求 Ci 。 
С, = ], 
2) 9: 4 
由 于 
= үз 
二 2 二 
d=[ 1,2,1]|1 7-2 4 ч. 
-1 2 1 
(5 2 1 
6 6 6 
2 
=с-1,21|2 2 -名 (= 00,01, 
A єй 357 
6 6 5%) 
所 以 ， 取 
了 = ci(cei)7prR=ei(ei)7p7[I+pci(cr)7p7]-i 
“一 1 r Es 
=e(pe1)'[1-+ реї( epi Ц 2 | 2 | 
r Pei ре: рет = 6 | 2 = 15 7 
X. ¿J Ç 1; 
l=] = | (= af =j 
С* а i 2 _ 1 2 +: 2 =. 2 2 
+ 16 12, , ii J 12 К 
1 \с 7] 1 1 1 


03 2 
由 于 | 
[ел eh g ТА 
11 
d= (0,3, "| Kazi 2 2 | | 
1 1-\—-1 2 1/ | 
5 1 1 ` 
. | 6 3 6 
ыр 1 1 (5 1 ) 
= kos „Ж. art Je 
00:80), 3 3 3 | 3'*3”3 = 0, 
(1 _1 5 
le 3 6 
所 以 ， 取 
А 4\71 б, 
ые. Кн | 
2 ГЕЧЕ а) ое 
2 |. 2 | A 
з ! \ 37 Ў, 2) 
£ —] _ 1: 4 45 fAs 
= Os = (CG; - jpCi， f =]; 2 2 -过 1 14 || 
i ; : “| | 
x. “À 1; 2 2; 42у, 
Z —13 —13 16 \ 
ы: | 
73 -3 8j 


”线性 最 小 二 乘法 问题 ， 曾 经 一 度 只 用 法 方程 组 47Ax= Ab 
来 求解 . 但是， 由 于 方程 组 的 条 件数 之 间 存 在 着 Cond (АТА) = 
(Cond(4))2 关系， 所 以 当 Cond (A) 较 大 时 ， 法 方程 组 就 变 得 
非常 “病态 ”， 用 这 种 方法 便 难 于 求 得 满意 的 解 了 。 此 时 ， 为 了 
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避免 处 理 非常 病 坊 了 芍 方 程 组 ，n[ 以 采用 正 交 化 方法 和 镜像 变换 
法 ，“ 直 接 ” 对 矛盾 方 积 组 进行 求解 。 
ЖАТ, ШЕ А 的 秩 小 于 nn 时 ， 最 小 二 秉 解 不 唯一 ， 

从 而 需要 求 模 为 最 小 的 最 小 二 乘 解 。 为 此 ， 需 要 用 到 奇异 值 分 
解 ， 这 种 分 解 的 难点 是 ， 确 定 (5.3.2) HE Ж жи, Ку ЗЛ 29 0. 
Golub 与 Reinsch = 1970 年 提出 了 -一 种: 数值 上 十 分 稳定 的 分 解 
Ў, PILARA Et (见习 题 2) ， 意 味 着 这 种 方法 是 
较为 可 靠 的 。 我 们 可 以 把 这 样 得 到 的 解 用 ) 义 逆 矩阵 米 表 示 ， 
目前 广义 逆 和 矩阵 已 有 痕 多 计算 办 法 ， 它 可 以 不 通过 奇异 值 分 解 
而 直接 进行 计算 ， 由 于 篇 幅 有 限 ， 存 此 ， 我 们 仪 介绍 了 一 种 递 
Fe rik, 


第 五 章 习 Ж 


5.1 ШЕШ] (D (АА')2- АА} (2) (А'А)%*=А'А; (3) (А')*=А, 
5.2 设 0;(4) ЖО: (А + Е) ЈЕ АА + ER атн, WEBO; (A) - 
[E|=<o (A + Е) <0: (А) + [Е|, 
5.3 HEMA 048 2y КАРО RET ERDE. 
5.4 证 明 
е АБУ Ж, П (АТА) ТАТ-А*; 
АЛТИ, ПЦАТ(ААТу-:=А', | 
5.5 ЕНЕ 15.3, 50И ДА = X AX38IXA = (XA TJ vr. 
5.6 证 明 等 式 (5.4.15)。 | 
5.7 Ë AGR" az рН, CER "ETARE, Н р rs 
条 件 Cx= dd 下， 使 |b 一 Axl: 法 到 最 小 的 最 小- -条 解 的 算法 ， i 
为 已 知 的 列 疝 晤 ， | 
5.8 $ 


ГУ. +У2 +УзЕ 1, 
12у; Уг = 0 
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的 模 为 最 小 的 解 。 
5.9 证 明 ЖАННАТА = UDV, УТО ВАТА 
和 上 47 的 特征 问 量 。 
5.10 利用 对 称 分 块 矩阵 求 逆 法 ， 求 

^ 9 0 -i 0 


0 3 0-1 
я ш. 
: 0-1-1 3 
RRRA, 
5.11 羊 盾 方 班组 4x = brih ТЕ G, 3.8) 与 通 解 (5.3.19) 是 否 等 价 ? 
为 什么 ? | 
5.12 ЖЕЙТ 
1311) 
A= 2000. 
1000. 


ВОЛОВА", 
5.13 给 定数 据 表 
xi| 0.000 1,445 2,890 4.335 5,780 


yil 1.8419 2.9633 18,2360 98,7410 529.2178 
ЖЖМ У = пе** ARTETA. 
5.14 ЖАх= b 的 模 为 最 小 的 最 小 二 先 解 ， 其 中 


$ * + 
[11 Stewart. G. “Introduction to Matrix Computation’ Acade- 
mic Press. New york, 1973. 
[21 曹 志 浩 等 编 ， 和 矩阵 计算 和 求 方程 根 。 
[3] 党 诱 诗 编 ， 矩 阵 论 及 其 在 测绘 中 的 应 用 , 测绘 出 版 社 , 1980。 
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7ч МОНЕ 


ARTIE. HADR. ВТ SRK m ИП PS W lu] 
m, ТАТ ЛЕ Ж: ДИ К НЕ О ВЕЛЕ ЯН АУ R: 
Ах= 0, (6.0.1) 
这 种 方程 组 的 特点 是 : 年 阵 4 的 阶 数 关 很 太 ， 但 其 非 零 元 素 的 
Ф т Ети ;的 比例 却 很 小 ， Ж т/пё RRE А НУ REF, ЭШ 
Te `à туп? [0,05-0,25 hF, ВЛА E ffó Bt 63. 
ЖОНЕ ЕК, SRE PAT AE RETO БЕ EER r TH КУ ОЗЕН) 
К. ПАЖЊА AE, 只 让 非 零 的 信息 参与 运算 和 存 贮 ， 
这 样 往往 能 在 存 迪 最 和 机 器 时 间 的 节省 带 来 巨大 的 收藏 。 限 于 
篇 巾 ， 评 贡 只 着 乔 讨论 用 由 坊 法 求解 确 朴 线性 方 程 组 的 问题 。 


51 稀 疏 矩阵 的 存 贮 


1.1 等 带宽 矩阵 的 存 贮 

РРА, ТЕТЕ т, E 

а=, 11-2 G j=l, 696,0, ) (6.1.12 

则 称 和 是 等 带宽 的 ， 称 2m + 1 为 其 带宽 ，m 为 半 带 т, R WS 
ж-т 的 所 有 的 武力 元 素 的 集合 叫做 4 的 带 形 区 域 。 

当 对 方程 (6,0。1) 进行 不 带 行 交换 的 高 斯 消去 法 对， 在 带 
I A 
区 域 部 分 的 元 素 在 人 机 器 

注意 到 矩阵 和 的 带 形 区 域 的 形状 ， 见 图 6.1 的 阴影 部 分 ， 
它 只 需 补 充 少 数 儿 个 元 素 就 可 当 作 二 维 数组 来 存放 。 


46.1 ЖЖ ЕЁ 


图 中 画 有 “ 殖 ” 的 元 素 ， 其 数值 可 以 任意 给 定 。 把 得 到 的 二 - 
维 数组 记 为 L[1:n,t:2m+1j; 3 i. 3 ос жа. ЖА с BJ 
fy. 9), Т, 表示 Gil H L PRI IŽ, Wij 
U =t f=f-i+m+i, 
Ё=1,2,+,т, 
max(1, 1 —my=scj=<min(n,i+m), (6,1,2) 


(6.1.2) 指 出 了 4 在 带 形 区 域 中 件 意 一 个 元 束 的 位 置 与 该 元 Ж 
在 工 中 的 位 置 的 检索 关系 。 所 谓 托 中 的 讨 缩 存 贮 ， 主 要 就 是 要 
建立 这 样 的 位 置 检索 关系 。 当 及 是 对 称 阵 时 ， 等 带宽 知 阵 可 以 
只 存 贮 其 下 三 角 阵 部 分 , 设 将 ai; 存 在 二 维 数组 L n рон 1] 
RCG, jh, Wi 
Ы i =l, }'=ї-]+1, j&i, 
i= 1,2,5, j= l,“ пах(1, i~ Mm), 
1.2 ЖЕРТ 
如 果 和 是 对 称 阵 ， 我 们 把 和 的 第 i 行 上 对 第 线 左 侧 启 对 角 
线 最 远 的 非 零 元 素 到 同行 对 角 元 间 的 距离 i 为 8;， 称 为 第 说 行 
。193 。 


上 的 六 带宽 。 当 有 4 是 正定 对 称 阵 时 ， 由 于 可 以 进行 Cholesky 
分 解 

A= LU, 
其 中 工 是 下 三 角 阵 ， 可 以 证 明 ， 工 阵 在 第 守 行 上 的 半 带 寅 一 定 
与 8; 相等 。 这 伴 ， 当 把 和 的 三 角 分 解 的 输出 工 的 元 素 放 在 44 
的 下 三 角 阵 中 对 应 的 元 素 上 时 ， 则 4 和 工 的 存 贮 量 要 求 将 是 完 
全 一 致 的 。 

4 的 变 带 宽 存 贮 是 这 样 实 现 的 ， 逐 行 把 4 的 下 三 角 部 分 的 
每 一 行 的 元 素 〈 和 包括 平 带宽 范围 内 的 每 一 个 堆 元 和 非 Жол), 
依次 存 人 一 -个 ~-- 维 数组 L[1:s1 中 ， 基 中 

сы ра; (Bi+ 1), (6,1,3) 


SASi- 1 i=l, s, ñ, 
令 4 的 第 守 个 对 角 元 在 工 数 组 中 的 地 址 为 01], Да: <i) 
在 工 中 的 地 址 1 可 表 为 
I=d[i]J+;-1, (6.1.4) 
ar 有 = È (В, +1). (6.1.5) 


Kz, ШИА 1 838, ОК ARE RERE А rh 
的 行 号 i ЈЕ}: 

i=max(I—d[k]) +], 

А 

ў=1-4(1—1]+1—8,=1-4[(1]+1,_ (6.1.6) 
可 见 ， 在 组 织 对 称 阵 4 的 变 带 宽 输 和 人 时， 应 输入 两 个 ~ ИН 
LE1;sJ 和 Drii1:nj， 前 者 是 逐 行 存 放 A 在 各 条 半 带 宽 上 的 元素 
的， 后 者 是 存放 A 的 对 角 元 在 中 的 位 置 的 。 

ЗП 6.2. Er $ 8 S 39 E 20: n= 9, В, = 0, B:= 1, В, = 2, 

В, = 1, Bs = 0, Be = Ва h В, = 2,8. = 3; s= 23, d, = l, d;=-3, 
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d, = 6, @ = 3, d; = 9,1; = 13, d; = 16,@ = 18,бу= 23; G. EL 中 
ns E T 


号 j 各 为 ， 


КЖЕ КЕ 


16.2 РИАЕТ ре 
{ = тах(122>4ГК]) += 5+1=6 
}=12-4+6=в, 
1.3 К# КЖ 

当 和 矩阵 4 中 的 非 零 元 素 的 分 布 十 分 零乱 时 ， 可 用 下 述 的 压 
缩 存 喧 法 进行 存 凡 。 

在 内 存 中 指定 1 个 连续 编号 的 单元 ， 称 为 列 首 址 表 ， 记 为 
ВСГ1:и], ВСГЇЈ 的 内 容 被 规定 为 4 的 第 了 列 第 1 个 非 零 元 素 的 
信息 条 首 址 表 所 谓 一 个 非 堆 元素 a, 的 信息 条 ， 是 指 由 三 个 E 
续 编号 的 单元 组 成 的 成 组 单元 ， 三 个 连续 单 元 中 的 内容 A 
6.3 规 定 。 
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如 图 ， 如 果 在 第 了 列 的 ao 元 素 之 下 还 有 后 续 的 非 零 元 ， 
就 在 第 三 妆 址 的 内 容 中 填写 下 一 个 非 零 元 的 信息 条 首 十 ， 如 巢 
cj 是 第 了 列 中 最 后 一 个 非 考 元 ， 就 在 第 三 地 址 中 写 零 。 这 EE, 
当知 道 了 一 个 元素 的 信息 条 首 直 之后， 不 仅 同 本 能 确定 该 元 素 
的 值 ， 调 莫 连 下 -一 个 非 零 元 的 信息 条 首 址 也 知道 了 。 由 于 同 列 
的 韭 零 元 的 所 有 的 信息 条 是 一 一 连接 的 ， 记 以 这 种 存 贮 方 法 又 

当知 道 工 过 的 行 导 和 殉 号 了 了 时， 查找 元 素 a, 的 步 又 应 


МА ЖЕ 

1) H ji BC[ 门 ， 设 共 内 容 为 ; 

(BCLj1) = d, 
d 是 第 J) 225 AFETAR АЛЛ. 

2) WË (4) =i ДЩ[(д+1) =a; 于 是 检索 ан 的 工作 结束 

3) 19:09) аі, 则 (+ 2y= d, 3F362); 只 要 元 素 的 行 、 
ЖЇЗ ES MYS, ӘН -次 会 使 2) pk YZ, 

AREA 的 非 零 元 的 总 数 为 * ， 则 存 贮 全 部 信息 所 需 的 存 
锭 单元 总 数 为 3714 n, 34 зт њи? Н, RHFET 是 很 
有 利 的 。 

当 朋 直接 法 求解 方程 组 (6.0, 1) 时 ， 原 矩阵 中 原来 是 霉 的 
元 索 ， 在 消 元 过 程 中 可 能 变 成 非 零 的 元 素 ， 原来 是 非 零 的 元 素 
又 可 能 消 元 为 零 ， 于 是 在 信息 条 的 “链条 ”中 ， 必 须 讨 沦 “ 增 
添 ” 和 “删除 ”一 个 元 素 的 问题 。 上 述 存 贮 方法 能 方便 地 实现 
这 种 要 求 ， 

首先 ， 假 定 在 内 存 中 有 ~--- 个 有 足够 容量 的 空白 单元 区 ， 其 
首 址 为 工 , 它 是 由 三 个 连续 编号 的 单元 组 成 的 空白 条 的 “链条 ? 
组 成 的 ， 空 白条 与 信息 条 的 区 别 在 于 : 空白 条 的 第 一 、 第 二 地 
址 的 内 容 可 以 是 任意 的 ， 但 第 三 地 址 的 内 容 必 须 填写 下 一 个 空 
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白条 的 首 址 。 而 空白 区 的 首 址 L 存放 在 一 个 固定 的 地 址 5 rH, 
即 令 
(S) = L. 
于 是 当 要 在 和 矩阵 的 第 j 列 中 增加 一 个 元 素 时 ， 例 如 ， 设 在 
第 j 列 中 ， 相 邻 的 两 个 非 零 元 a. a, 已 经 分 别 放 在 首 址 为 
dd, 的 相连 接 的 信息 条 之 中 ， 其 中 i - 122, 


di asi ажо |. ү 


аз +1 d, +2 


| а; d> | (| а;, р 9 


今 欲 在 第 了 列 中 的 a, a, ZA A л 3 G (i <i<i,), 
E F 225 RIT: 
1) G) = 工 ， 找 到 空白 区 首 址 ; 
2) (L+2}) 汐 3， 把 下 一 空白 条 首 址 作为 空白 区 首 址 
3) fEL, L+ 1, L+ 2 中 分别 记 人 :Peiyas 即 “征用 ” 原 
空白 区 的 第 1 个 空白 条 为 信息 条 以 记录 a 及 其 行 号 ， 并 把 新 
T B ЖА F hu Ee Ef; 
4) 把 工 记 入 di1+2， 即 把 新 信息 条 的 上 端 也 接 好 ， 
ша, 是 第 了 列 中 的 第 1 个 要 增 新 的 非 零 元 或 最 . 末 一 个 机 
增 新 的 非 零 元 时 ， 亦 可 仿 此 进行 连接 。 
当 要 从 第 了 列 中 “删除 ”一 个 元 素 时 ， 例 如 ， 设 ciip 
qi |z, 已 经 分 别 存 放 在 以 @i ds ‚а, 为 首 址 的 互相 连接 的 信息 
条 之 中 ， 即 
4 шт i G dst1|lds+2 
ааа | a | [вара | ee 
今 欲 删除 以 4, 为 首 址 的 信息 条 ， 为 使 被 删除 的 信息 条 能 “ 退 
役 ” 到 空白 区 中 ， 隐 备 将 来 征用 ， 可 按 下 列 步骤 实现 : 
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1) (d:+2) 之 dt+2， 这 就 完成 了 对 d, 条 的 删除 ， 

2) WSs L, ЖШ L, ЈЕ ds, 1>@й,+2, ИИИ 
掉 的 信息 条 作为 空白 区 的 第 1 个 空白 条 ， 关 使 之 与 原 有 空白 条 
连接 起 来 。 

还 可 设计 出 一 些 压缩 存 贮 的 方法 ， 但 使 用 上 述 连 接 囊 方 
法 ， 却 独 具 一 种 优点 ， 即 增 山 一 个 元 素 都 很 方便 ， 特 别 ， 欲 变 
БЕРУШ, Plin AARE j Mj Л, RRE ВІЛ] 
MBUJHARAZHAZRRIT. ХЕЙ GRAS 地 推广 到 
EE LCE OLEA 


32 消 元 次 序 


2.1 Ш 

在 稀 芍 矩阵 计算 中 ， 在 设计 或 选用 一 种 算法 时 ， 应 忌 可 能 
使 计算 过 程 所 需 的 最 大 存 喧 量 和 运算 次 数 达 于 极 小 ， 为 了 达到 
这 个 目标 ， 先 介绍 几 个 术语 ，。 


ЖЖ .如 图 6.4 е 
所 示 的 7 ИРЕН, JH x x @ Ф z 
x 表示 非 零 元 素 ， 空 白 С: 9 
处 为 零 元 素 。 在 进行 消 _ е" 
元 过 程 的 第 一 步 时 ， 应 | 7 
把 第 1 列 上 三 角 化 ， 此 ЭШ: Ф x 


时 第 1 列 上 的 (2, 1) ， 图 6.4 ”填充 量 

(3, 1)， (7,1) 应 消 元 成 零 。 与 此 同时 ， 原 来 有 些 是 零 的 元 Ж 
#H(2,3), (2,6), (3,6), (7,3), (7 6) 却 将 由 零 变 成 非 零 ， 图 
中 用 @@ 标 出 的 地 方 ， 就 是 这 些 新 增 的 非 零 的 元 素 。 在 本 例 中 ， 
其 个 数 是 5 个 ， 称 为 第 一 步 消 元 过 程 中 产生 的 填充 量 。 如 以 此 
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数 减 去 原 第 1 别 中 的 被 消 元 成 零 的 非 零 元 个 数 ， 本 B| 中 应 为 
5-3= 2， 可 称 之 为 第 1 次 消 元 时 的 填充 增 鞭 。 类 似 地 ， 在 第 
2 次 消 元 时 也 会 出 现 新 的 填充 量 增 量 ， 而 在 整个 消 元 过 程 中 ， 
填充 量 增 量 将 有 一 个 最 天 的 积累 

值得 指出 的 是 ;填充 最 的 积累 与 主 元 选取 的 次 序 或 矩阵 的 
行列 的 排列 次 序 有 关 。 如 图 6,5， 当 按 自然 次 序 消 元 时 ， 则 在 
第 一 步 消 元 时 ， 填 充 量 即 达 于 最 大 ， 但 车 把 第 1 行 、 列 与 最 来 
的 行列 交换 时 ， 则 整个 消 元 过 程 中 。 填 充 量 保持 为 零 。 下 一 池 
我 们 将 介绍 一 些 重 排 行 、 列 次 疗 的 方法 ， 以 使 填充 量 积 累 趋 于 
极 小 。 | 


x x x х x x x 

x x x x 

x x X x 

x x х х 

х x x x x x xÜ 
(a) (b) 


6.5 填充 景 与 行列 交换 


主 元 容 限 芭 在 利用 列 主 元 或 全 主 元 消去 法 把 矩阵 上 三 角 化 
的 过 程 中 ， 例 如 ， 在 做 第 1 步 列 主 元 消去 时 。 通 常 应 把 第 1 列 
中 绝对 值 最 大 的 元 素 换行 到 (1, 1) 的 位 置 ， 然 后 进行 消 元 。 这 
样 做 的 目的 ， 一 般 是 为 了 提高 计算 精度 的 。 但 是 ， 如 果 当 前 的 
主 元 的 选取 恰好 导致 填充 景 增加 最 大 ， 这 就 不 利于 内 存 的 节 
省 ， 于 是 宁愿 选 泽 一 个 绝对 值 不 是 最 大 但 又 不 会 引起 填充 量 有 
过 大 增长 的 元 素 作 主 元 。 当 然 ， 作 为 主 元 的 元 素 ， 某 绝对 值 也 
不 能 过 小 ， 否 则 就 会 引起 精度 的 大 的 立 失 。 人 为 邮 规 定 一 个 办 
限 e>>0， 当 和 扼 阵 的 苑 索 依 模 大 二 此 数 时 ， 该 元 素 就 具有 了 当主 
元 的 资格 ， 如 果 它 引起 的 填充 量 也 果然 不 大 ， 就 可 把 主 元 定 下 
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来 。 所 规定 的 这 个 界限 e 即 称 为 主 元 容 限 。 这 个 限量 可 以 经 验 
地 给 似 规定 ， 但 它 应 体现 计算 精度 及 存 贮 节省 的 统一 要 求 。 
主 元 容 限 的 可 供 推荐 的 选取 方法 是 ， 先 求 
а= маха 
并 取 e= 1070, 
主 元 容 限 的 上 述 选 取 方法 是 以 矩阵 具有 一 定 的 均衡 性 为 前 
提 的 ， 即 矩阵 的 元 素 依 措 均 不 大 于 1!， 且 每 个 行 和 每 个 列 中 都 
至 少 有 一 个 元 素 依 模 不 小 于 1/2。 当 和 矩阵 非 奇 异 时 ， 通 常 总 能 
找到 两 个 对 角 阵 D 和 Do EDAD: 能 成 为 均衡 或 接近 均 Sr. 
2.2 填充 量 极 小 化 方法 
在 进行 某 一 步 消 元 时 ， 该 步 中 的 填充 量 极 小 化 问题 是 容易 
处 理 的 。 然 而 ， 即 使 每 一 步 消 元 都 保证 了 该 步 中 的 填充 量 极 小 
化 ， 也 未 必 能 保证 得 到 全 局 的 填充 量 极 小 化 方案 。 双 得 到 全 局 
的 使 填充 量 积 累 最 小 的 消 元 次 序 ， 原 则 上 应 比较 所 有 可 能 的 消 
元 次 序 方案 中 实际 填充 量 积累 的 大 小 ， 才 能 选 出 最 好 的 方案 。 
但 是 ,所 有 可 能 的 消 元 次 序 方案 总 数 可 达 m) 之 多 ! 因此 , 现 
实 的 作 革 仍 只 需 保证 每 步 消 元 过 程 中 的 填充 量 极 小 就 行 了 。 但 
此 种 作法 只 能 叫 作 局 部 的 填充 量 极 小 化 方法 。 
由 于 每 一 步 消 元 过 程 中 填充 量 极 小 化 的 讨论 方法 是 一 样 
的 ， 所 以 我 们 只 讨论 第 1 步 消 元 时 的 填充 量 极 小 化 方法 。 
令 忆 是 4 的 布尔 矩阵 ， 其 元 素 规定 为 
l; а;: == 0 BJ; 
b; = Í ` 
0, 34a;i=0 Н, 
设 在 第 1 步 消 元 过 程 中 ， Да, 为 主 元 。 则 ar 六 0， 称 p> = 
行 ，4 为 主 列 。 于 是 ， 在 (i, 四 元 案 处 产生 填充 量 的 充 要 条 件 
是 


(6. 2.1) 


(ap 380) A (G, P= 0) 人 (Gii = 0) (6, 2.2) 
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或 
或 


(b, = 1) А Фе = 1) Л (фр = 0) (6. 2. 3) 


етре;ет Ве, етВе = 1, (6.2. 4) 
х Вв РЕ, CEEB НАЈ O 换 成 11 换 0 后 所 成 
的 和 矩阵。 因此， 当 以 as 为 主 元 时 ， 路 了 行 和 4 列 上 的 元 素 
外 ， 在 其 余 各 处 产生 填充 量 的 总 和 为 

Era = > ej BeeBee Be, (6, 2, 5) 

iwp, j=q 

ЕЖ, 1 ЕУЕН, щі=р а ј=-9, HF 
еўве,е} Бе, = 0 及 eTBe,eTBe,= 0, 


故 (6. 2.5) 中 求 和 号 下 的 ip， 产 4 的 限制 可 以 去 掉 ， 得 


n 
Ë. = 2) егве,етВе;е! Ве, 


г.у "1 


= >;е;Ве;етБ' ее Ве. 


f.7=1 
= еВ ( >: e eT)B87 ( 之 e, e7 )Be, 
j=l i-l 
= eTR Be, (8. 2. 6) 
令 

g.a = min (eTBBTBe,.1, (6.2,7) 

2.9 

Іареј > є 


Д] (а, В) 应 是 第 1 КЧ ЕДА ЗЕ БЫ ЛАЛЕ НО Е лї. 
这 个 方法 是 1967 年 由 Tewarson 提出 的 ， 其 Fi, Markowitz 
又 把 此 芒 加 以 简化 。 称 
b,;b;, 
ХІН, А (р, 3 为 主 元 ， 而 在 全 万 处 可 能 产生 的 
填充 量 ， 由 于 
bibi >b; (1 — bi) bi; 
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类 似 于 (6.2.6) 的 推导 ， 可 得 
E... = >b jbi = 0708 - DVYVT(B- D е, 
= еїв-рМм(В--})е,, (6,2, 8) 
这 里 用 Y 表 示 分 量 全 为 ] 的 向 量 ，M 表示 元 素 全 为 1 的 矩阵 。 
令 | 
g. = min {Є7(В—1)МСОВ-1)ё,}, 66.2.9) 

ТНТУ 
这 就 得 到 了 Markowitz уіН эк НАМ MER ЖЕ. 

Ф, НЕ (6.2.8) eiB- МУГ вре, 分 别 表 未 
与 元 素 q,, 同行 或 同 列 的 不 包含 a у: у, AE Ё, Я 
ВІР SR. TRH, ECE ZRH. 

WAEREA МЕКЕЕВ, 26 T ЕЕН aE pz pE At 
的 对 称 性 ， 通 常 应 把 主 元 选 在 对 角 线 上 ， 即 于 (6.2,9) 中 ， 应 
I a= B, 48 

了 = min (VT(B — D) ep}. (6.2.10) 
Japp!> г 
2.3 计算 量 的 极 小 化 方法 

在 消 元 过 程 中 ， 欲 使 总 的 计算 景 赵 于 极 小 ， 选 取 主 元 时 也 
应 有 一 定 的 策略 ， 我 们 仍 以 第 1 次 消 元 时 的 计算 景 分 析 为 主 ， 

ша, 被 选 为 主 泡 时 ， 其 进行 过 程 为 : 先 作 一 次 除 法 ， 用 
以 求 主 元 的 倒数 1/a6..，Y7Be, - 11 ds З Ез 71, 
这 是 矩阵 三 角 分 解 中 需要 存 巡 的 信息 ， 再 作 ez BY - 1 KRA, 
Зя Еу. KEWAA И: PWs fE 
У, (егве;) (eTBe,) = (eTBV — 1) (М ?7Ве 一 1) 
人 
次 乘法 ， 这 是 谢 元 时 需 杰 作 的 。 十 是 ，1 次 消 元 时 的 乘除 法 总 
量 为 ; 
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Bs=1+ (VTBpe, - 1) + (е7ВУ - 1) + (erBY – 1) 
x (V! Be, – 1) = е}ВМВе„, (6,2,11) 
比较 (6.2.。8) 与 (6.2.11)， 并 引信 
h, (H) = eL (B -RD М HL) €, 
(0=<0=%1) (6.2, 12) 
ШЕ 
Rh,.(0) = Bro №, 1) = Б, (6.2,13) 
上 式 分 别 表 示 ， Ua. 为 主 拒 时 ， 欲 使 计算 景 极 小 应 取 上 = 0, 
而 欲 使 可 能 的 填充 量 极 小 应 取 册 = 1, TOE R, G) 应 视 为 一 次 
消 元 过 程 中 ， 当 a, 为 主 元 上 时， 使 计算 最 和 填充 量 达 于 极 小 的 
带 权 平均 值 。 而 
Bap (8) = тіл h, (Ш) (6.2.14) 


[ару јх ғ 
将 是 综合 计算 量 的 极 小 化 和 填充 量 的 极 小 化 的 选取 主 元 的 策 
赂 。 权 关 子 的 选取 ， 了 到 决 于 机 器 的 一 件 和 软件 ， 当 计算 速度 成 
ARSE EZTAN, AR 接近 于 零 ， 反 之 ， 则 应 取 
u 接近 于 1， 
2.4 带宽 极 小 化 方法 
由 于 对 称 带 状 阵 在 带 形 区 域内 的 零 元 在 存 贮 时 也 要 分 配 
单元 ， 当 带宽 较 大 而 巷 形 区 域内 的 专 元 又 较 多 时 ， 常 可 利用 交 
换行 的 相似 变换 使 带宽 减 小 。 如 图 6.6(e) ， 对 给 定 的 对 称 6 И 
和 矩阵， 由 于 半 带 宽 m = 6， 依 等 带宽 的 压缩 形式 存 贮 时 需 占 用 
21 фз. EREKE 1,2,3,4,5,5 各 行 和 各 列 依 次 
排 在 第 1, 6, 2,5,3,4 各 行 和 各 列 时 则 得 如 图 6. 6 (0) ЕНД 9 Ой 
结构 ， 此 时 尘 带 宽 为 由 =1， 仅 需要 用 11 个 单元 ， 
х КАБ Н ТААН ИД: 3KOHESIEE P , E 
PAP? 
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的 带宽 最 小 ， 其 中 4 是 对 称 正定 乍 阵 。 


x 0 Nn 0 бох X vx 
ü x 0 ú X X (Рх x x 
б о xX x x Ü | ххх 
0 бол xn ù x XA 
охх Ü xy | X X x 
x x 0 uú G К x X 
(À h) 
| 图 6.6 带宽 的 约 化 
= 
3 ' ~ А 
T эу Е РС. 


сч) (b) 
图 6.7 16. БНТ) ЕЕЕ ГИ IRE 

我 们 将 借用 图 论 中 的 一 些 术语 来 讨论 上 述 问题 。 

АА ЖЕЕ А n ЗЕ, РРА БЕНЯ п A 
TEA 21,7, ++, Une 34 5EREA 197—3 G, ae 0 时 ,用 一 条 边 把 顶点 
о, 和 vw; Ж 起 来 ， 记 为 (op2i)， 称 为 边 。 当 视 (0,0) 与 
(р, zt 为 同一 条 边 时 ， 称 这 种 边 为 无 向 边 , 否则 称 为 有 向 边 ， 
(vj;9)) 称 为 自身 路 ， 若 记 顶 点 的 集合 为 V= {VV бэ, б}, 
边 的 集合 记 鸭 EE= {‹®,,®;) }， 则 顶点 与 边 的 集合 

G= (V, E} (6.2.15) 
称 为 图 。 

当 所 有 的 边 均 是 元 向 边 时 ， 相 应 的 图 叫做 无 向 图 ， 肥 之 虽 
做 有 向 图 。 当 4 是 对 称 阵 时 ， 通 常 我 们 只 研究 它 的 无 癌 图 。 例 
如 ， 前 看 已 给 的 图 6.6(q,，(b) 中 的 算 阵 的 无 向 图 为 ( 见 图 6.7)， 

如 果 在 图 G 和 图 G 的 项 点 和 过 之 间 可 以 建立 一 一 对 应 的 
关系 ， 并 且 对 应 边 上 的 对 应 点 也 是 对 应 的 ， 则 称 图 G 与 图 G' 
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同形 ， 同 形 的 图 可 视 为 同 -一 个 网。 当 A 是 对 称 阵 时 ， 显 然 其 局 
形 的 无 向 图 是 叭 一 确定 的 ， 反 之 ， 辣 形 的 无 向 图 也 唯一 地 确定 
了 对 称 阵 的 非 零 结 构 。 当 4 是 正定 对 称 阵 时 ， 由 于 第 阵 4 的 每 
个 对 角 元 均 是 正 数 ， 因 此 ， 其 无 向 图 上 的 每 个 点 都 有 一 条 自身 
路 ， 为 了 简化 图 面 ， 今 后 在 讨论 正定 对 称 阵 的 无 向 图 时 ， 我 位 
ЖЕ E 1LET4J Е Pr En. 

交换 对 称 阵 的 第 1. J NITRA БЕРЕТЕ № BH Ji 
的 无 向 图 ， 可 知 ， 愉 要 在 原 有 的 元 向 图 中， 交换 顶点 2 和 wj 的 
编号 ， 即 可 得 刘 交 换 后 的 乱 阵 的 元 向 网 ， 由 此 推 钻 ， 憩 阵 

РАРТ (5. 2,16) 
Ж, АЙЫ ДЕШЕ ЕТ Етан = ЭЕ i Eq АУ #6 
阵 。 于 是 求 排 列 阵 的 问题 就 转变 成 如 何 对 图 的 顶点 进行 编号 ， 
使 P4P7 的 带宽 极 小 化 的 问题 。 

在 图 GG 中 任意 取 定 一 个 湛 点 ?;， 称 通过 此 点 的 边 数 为 该 点 
RIRE, XES ARE Eo, 本 身 的 顶点 叫做 汪 的 邻 点 ， 显 然 2; 的 
邻 点 的 个 数 与 的 及 是 相等 的 。 

注意 到 矩阵 4 的 第 主 行 上 的 半 带 宽 В, 760, 的 编 号 WK 
жо, їйдїн! о, 编号 小 的 县 小 的 编号 ， 当 о, 的 邻 点 中 没有 
H v: 更 小 的 编号 时 ， 则 8; =0， 可 用 ,寻求 顶点 的 编号 的 方法 ， 
以 使 图 的 相应 的 矩阵 有 最 小 的 带宽 ， 其 原则 之 一 应 当 是 ， 每 个 
顶点 ”的 编号 与 4 的 邻 点 的 编号 不 宜 相差 过 大 ， 

Cuthill 和 Makee 基于 图 的 理论 ， 用 对 顶点 重新 编号 的 
方法 ， 使 矩阵 的 带宽 减 小 ， 文 献上 称 为 CM 方 法 ， 其 后 又 为 
Rosen 加 以 改进 ， 发 展 或 为 RCM 方法 。 目前， 它 已 应 用 于 iF 
多 大 型 结构 的 程序 分 析 系 统 。 

于 图 G = {V,E} 的 顶点 的 集合 V 中 ， 任 取 度 数 最 小 的 一 个 
顶点 2 RAR, E 
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L: = {0} (6.2,17) 
称 为 第 一 分 屋 ， 抬 了 p5 e 3ESEBRU KRE {不 包括 2) 记 为 
L2， 称 为 第 2 个 分 层 ， 一 般 地 把 与 工 ,-1 相 邻 但 不 属 于 工 -1 与 
Li-2z 的 点 的 集合 记 为 Lo MAE i 个 分 层 : j V 中 的 点 一 共 可 
区 分 为 k 个 分 层 ， 称 


Lais Las ts Ly (6.2, 18) 
Ж НУЫ 2 АТ БА. ШК 
ыйыт, D = V (6, 2,19) 
i-i 
称 每 个 分 层 工 ; 中 的 点 数 w. 为 1 的 宽度 ， 而 把 
w = max wi (6.2.20) 
1515 


п Е ЕО ЖЕ, КОСУ ЖЕЕ IEEE. АУЕН, aE 
不 是 唯一 的 ， 选 定 以 后 ， 即 将 它 编写 成 1， 然 后 依次 给 第 二 层 
中 的 点 编号 ， 在 给 第 i 层 中 的 顶点 编号 肝 ， 应 先 编 第 i~1 6 
中 度数 最 低 的 那些 点 的 邻 点 。 和 如 这 样 的 点 不 于 一 个 ， 则 应 使 第 
i 层 中 编号 大 的 点 与 编号 小 的 点 分 别 与 第 i~ 1 层 编 号 大 的 点 
和 编号 小 的 点 相 邻 。 当 各 层 均 已 编 宪 后 ，~- 个 排列 阵 P 即 已 形 
ВК. А6. 7(а) 为 例 ， 如 以 ?为 根 ， 则 按 CM 方法 各 分 层 
分 别 为 : 
Ід = (0), Lz = (D Ls = (0, Ls= (us), Ls = {03}, Le = 001}, 
因为 原来 的 点 的 编号 1,2,3, 4,5,6 л HE 成 1,2,5,6, 4,2, ИП 
新 的 点 的 编号 应 为 1, 6, 2, 5, 3, 4， 于 是 
P= (é, Bos zs ё, ё, Ёл), 

LAPPEE, AETA 6. 6 (9) 中 的 矩阵 时 ， 即 得 图 6. 6 (Б) 
中 所 示 的 矩阵 。 

给 图 的 顶点 重新 排序 ， 使 相应 给 阵 的 带宽 赵 于 极 小 ， 这 是 
排序 过 程 中 所 要 追求 的 一 个 日 标 ， 此 外 ， 使 矩阵 的 外 形 趋 于 极 
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小 ， 则 是 排序 中 所 要 追求 身 男 一 个 目标 、 
RERI NE E th 
B= 2: (8, +1), (6.2.21) 


其 中 有 8, EEREN if EER., ФА, SAIE 宽 方 式 
FIERE, ERINNERN Н RTRT ЖЬ. 

在 CM АЈА Е 50 БО A, MEH CM 
方法 得 到 的 某 顶 点 的 编号 了 重新 编号 为 n~i+1， 可 达到 使 外 
形 减 小 的 目的 。 和 例如 ， 以 图 6.8 ЈЕ, ЖУР 为 109; 
ПОН НЕРУ ЕН RCM 方法 排序 对， 外形 化 为 97 。 


~ 


图 6.8 用 CM 方法 排序 


RCM 方法 也 还 存在 着 可 以 改进 的 地 方 。 首 先 ，RCM 方法 
需 对 所 有 度数 较 低 的 点 进行 搜索 ， 逐 个 计算 分 恨 结 构 ， 每 次 计 
фро ДЕЕ Р 和 РАРТ 的 带宽 ， 这 些 工 作 量 是 
比较 大 的 。 为 了 减少 这 种 搜索 的 次 数 ，Gibbs， Poole, Stoch- 
meyes 等 人 基于 一 种 几 各 直觉 ， 提 出 一 种 钓 直径 概念 ， 设 计 了 
另 一 种 求 分 层 结 构 的 方法 ， 称 为 GPS 方法 。 在 某 些 情况 F, 
使 用 这 种 方法 确实 显露 了 它 的 优点 。 


< 


图 6.9 用 RCM 方法 排序 

几何 直觉 的 启示 是 ， 分 技 结 构 的 深度 武大 ， 则 各 分 层 结 构 
的 平均 宽度 将 越 小 ， 注 意 L y 层 上 一 个 点 2 的 编号 r 减 去 
L 分 层 上 与 2 点 相 邻 用 编号 小 于 7 的 最 小 编号 的 号 码 就 是 和 矩 
阵 4 的 第 守 行 上 的 半 带 宽 ， 这 个 值 的 上 界 必 定 不 M Ñ Li L 
的 宽 庆 之 和 ， 记 以 分 层 结构 的 深度 大 ， 和 矩阵 的 带宽 将 平均 邓 越 
小 。、 设 以 人 为 根 的 分 屋 结 构 是 图 的 上 共有 最 大 深度 不 的 一 个 分 层 
结构 ， 我 们 把 从 vv 到 第 上 个 分 层 上 任意 一 点 之 间 的 最 短路 径 
时 做 图 的 一 个 直径 ， 甚 长 为 к, тон, 两 点 即 称 为 直径 的 端点， 
显然 ， 要 求 一 个 图 的 一 条 直径 及 其 端点 ， 理 论 上 应 进行 大 量 的 
搜索 ， 这 是 不 现实 的 ， 简 单 而 实用 的 作 渤 是 : 

D 取 件 意 一 个 度数 最 抵 的 点 2 

2) Ll u 28 ER 1,0,1, бз Lis 

3) TE L, 上 依 度数 增 和 的 次 序 选 点 s As 为 根 做 分 层 结 
构 ， 如 果 深 度 不 增加 县 3 BARUA), WREE, K 
3)， 如 深度 有 增加 ， 则 s 送 到 42 并 转 2)3 

4) L, 上 任意 一 点 与 2 Z [B| y Е k, uj 当 作 是 
ЕА АТИН, РИ ie. T L. 上 找 一 点 &， 使 
Дио ТОК КУНУ ЕНУ Ж, w (u) 满足 
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WP) = шїп (8), (6,2.22) 


例如 ， 在 图 46.8)? 中 ， 取 2= 1， 则 分 技 结 构 的 各 分 层 29: 

Li={1}, L= 2 3 4) L= {65,6,7,8,9), 

Ід = (10,11,12,13,14,15, 16}, Ls = (17, 18,19,20}, 

Ls = (21,22, 23, 24}; 
X ätk=6, H Twel) =wi24)=7, w(22)=w(23)=6, Б 
и= 23, Ди = 23 ЖИК 5 БЕН ЛЫ BJ БЕ Ж 

Mı = {23:, М, = {24,20,19,18, 22}, 

Мз = {16,19,13,12,17,21}, Ms= {14, 9,8,7}, 

М5 = (11,6, 1,3}, M. = {10, 5,2,1} 
МЫ МШЕ, EHid 

М = М, = 1,2,5, К, 

册 于 网 中 每 个 质 战 都 将 分 别 属于 分 层 结构 工 和 分 层 结构 М” 的 
一 个 分 民 ， 因 此 ， 每 个 点 各 对 应 工分 层 的 一 个 足 码 宇和 :M' 的 
一 个 足 码 ij， 亦 基 对 应 一 个 足 码 对 Ci, 站， 如 图 (6,10)， 这 个 
是 码 对 的 表 称 为 图 6.8 的 以 1, 23 为 伪 直 径 端 点 的 相关 层 囊 示 . 
如 果 把 相关 层 表 示 图 中 ， 具 有 相关 足 码 为 心 六 的 那些 点 组 成 
男 一 分 层 结 构 N 的 第 芋 层 ， 则 此 时 


Ni;= {1}, N, = (3,41,N.= {7,8,9}, 

Ма={12,13,15,16}, № = {20,19,18}, Na= {23}, 
它们 表明 ， 当 以 村 一 伪 直 径 的 端点 为 根 时 ，N; PRIA Ар МУ Е 
周一 层次 。 剩 下 还 需 把 相关 足 人 码 为 G, Dij AS a a AN 
的 各 层 中 ， 这 些 点 在 相关 层 表 示 图 中 ， 一 般 将 分 隔 成 互相 乞 离 
的 几 个 连通 的 子 集 : 

Cyy C2 t, Cia 
在 上 例 中 ，t= 3 而: 
c= {2,6,14,5,11, 10}, 
c= {21,17,22}, c,= {24)， 

它们 也 是 相关 是 码 的 集合 : 

c= ((2.1), (3,2), (4,3), (3,1), (4.2), (4, 1)}, 

Ca = ((6,4), (5,4), (6, 5) }, cs = ((6,5)), 
我 们 先 来 讨论 e, 中 的 点 的 归属 问题 .在 ci 中 任 选 一 个 关 
连 号 码 设 为 (4, 3) 的 点 ， 如 把 它 放 人 N. 层 ， 就 说 这 个 点 是 按 其 
第 1 足 玛 次 定 其 归属 的 ， 如 放 入 Ns 居 ， 则 是 按 第 2 W WY 决定 
归属 的 ， 因 为 (4, 3) 这 个 点 必定 是 Ni М, 的 邻 点 ， 所 以 决 不 
应 把 它 放 人 Na М, 以 外 的 层 中 去 ， 如 果 ci 中 的 点 全 部 按 第 1 足 
码 决 定 其 归属 ， 则 原来 的 Nt N ;, №, № 将 扩充 成 ， 

№= {1}, М,={3,4,2}, 

Na = {7, 8, 9, 6, 535}, Ns= (12, 13,15,16,14,11, 10), 

按照 前 面 提 到 的 应 使 诸 层 最 大 宽度 最 小 的 原则 ， 我 们 应 按 

第 2 种 方式 来 决定 c 中 各 点 的 归属 ， 类 似 的 讨论 可 施 Z + c, 
和 和 cs， 当 ci、cs .cs 中 各 点 都 已 分 配 完毕 后 ， 即 可 逐 层 进行 点 的 
编号 Nis №, +6, № 各 层 中 的 点 的 划分 情况 及 重新 编号 情 况 如 
图 6.10 和 6, 11 相 应 的 图 ， 这 时 的 带宽 已 缩减 到 8= 5， 外 形 则 已 
821198. 
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46.11 按 GPS 方 法 决定 顶点 编号 


55 带 状 方程 组 解法 


DRRR MPE ARRERA, EXER Hm. E 
当 联 系 到 内 存 及 计算 量 的 节省 时 ， 有 些 实用 性 的 技巧 值得 提出 
来 ， 本 节 着 重 讨论 这 方面 的 问题 ， 
3.1 等 带宽 矩阵 的 消去 法 
ЖЕНЕ ЕНК ИЕ осі К, ЖЕЖ аА 
必 是 对 称 的 。 
РА 
Ах= В (6.3.1) 
АЖ БЕН, ЖИВЕ А ВОЮ 2m +1. ЩА ЕЯ 
于 二 维 数 纽 工 [1:my 1: 2m+1J0J, 14 
LEi, j l= ACi, j], 
P =i} =j-i+m+], (6. 3. 2) 


i=1,2, +, и, Mmax(1, i- m) <<)j=< min (i + m, n) 


X n=6,m= 2t}, 3 КЈАРА, 工 中 的 存 贮 情 
况 见 图 6;12。 | 
| *21%- 


. 01 055 @з; G; | 

Gi 932 033 Пу 05 | 

042 Qiz Qis Qis Qie | 

053 G54 G;s Gss | 

daa Mes 066 J 

X X аааз 
x 


üz: G.) 0,3 G;4 | 


‚вз Qas Asa X X 
图 6.12 PREHIERE 


图 中 画 “ x ”处 的 元 素 可 以 是 任 总数， 由 于 消 元 将 在 工区 域 上 
进行 ， 但 原 和 矩阵 中 的 第 1 列 的 元 素 在 工 中 是 被 排 在 Жт+1 条 
上 行 对 角 线 上 的 ， 因 此 在 第 一 次 消 元 之 前 ， 应 先 在 前 台 行 中 ， 
分 别 将 第 1,2,-…,m 行 左 移 m,m -1, +, 1 次， 使 工 的 询 m 行 
还 原 成 掉 阵 原来 的 形状 ， 其 后 mr 行 中 原来 画 “ x ”处 的 元 窒 亦 
KARAF AE L 在 第 一 次 消 元 必 前 的 初 态 为 
ау G: G, 0 9 `, 
2 азу G24 0 | 


йз G; б, yq G; 


(т + 1) 


当 在 工 的 前 m+1 行 的 第 1 列 中 进行 列 主 元 消去 法 肘 ， 主 
„215, 


元 的 选取 、 换 行 以 及 实现 消 元 的 步 又 与 通常 的 列 主 元 消去 法 步 
驿 相 同 。 第 1 次 消 元 结束 时 ， 工 的 前 m%+ 1 行 的 形状 及 数值 Ж 
义 为 


£ r (1) 15 
| ü, а; e.. Чүү | 
{1) (12 
| 0 а а: т +1 
, 
| mo uon 
| 
i ) (I) 
“0 аньт аы тл i 


此 时 第 工行 中 的 信息 即 第 一 次 消 元 结束 时 的 输出 ， 它 们 在 回 代 
时 还 要 用 到 ， 应 予 保留 ， 而 当 把 第 2—m- 1 行 左 移 一 列 时 ， 工 
在 第 2~ 贡 +2 行 上 的 元 毒 正好 合 丁 第 2 次 消 元 时 的 需要 ， 之 
后 ， 消 元 见 应 在 第 2~m+2 行 上 进行 ， 仿 此 直到 消 元 过 程 进行 
完毕 。 当 然 ， 在 行 与 行 间 进 行 换行 及 消 元 步 又 时 ， 对 方程 组 的 
右 问 项 向 量 b 亦 应 进行 相应 的 处 理 . 第 让 次 消 元 时 ， 参 加 
消 元 BU fy 3⁄2 — М Rm + 1 42, 即 第 1 行 到 第 i+m 行 ， 
= i+m>nhF, EER iEn 行 ， 参 加 消 元 的 列 数 可 以 
一 直 是 2m +1 列 ， 消 元 结束 时 ， 开 始 回 代 , 而 形成 的 解 在 b rh, 
算法 的 具体 步骤 如 下 : 

算法 6.3.] 等 带宽 阵 的 列 主 元 消去 法 : 

1) Hm, =m+1, т„=2т+1; 

2) 对 ?= 1,2, +, mi-i, 

2.1) i=], e,m 一 上 


2.1.1) E LO, j-115 Lr, jJ = 1, e, M:), 
2.1.2) B LOr, m:]=Ln+1-r, m, -i+1] 
=0, 


2.1.3) NEXT i, 
2,2) NEXT +; 
3) W i=l,- il, 


>” 1% + 


3.1) # k= i, 
3.2) 对 ?=i+1, "1h1, 
3.3) WEILE, 11] >} LEk, 1M E ksr, 
3,4) NEXT r; 
4) 如 果 kəsi MD, AF 7); 
5) b[il-—>b[k]; 
6) L[i,]Ji—L[k,]] j=l», M 
т) E b[i]J = b[iJ/L[ti, 1]; 
ËL LCi, j) = LL[i,JJ/LLi,1], (j= 2, =+, o), 
8) 对 ?=i+1, =, mi, P 
8.1) 置 t=L[r,1],bir]= 6673 -—t=b[i1, 
8.2) L[r,j—1]=L[r,j]- t#LLi,JJ, G= 2, e, m), 
8,3) ER L[r, т. = 0, 
8.4) NEXT r; 
9) 如果 mi aen ШШ ту-ту + 1; 
10) NEXT i; 
11) Æ blin] =b[9]/LIn, 1], 天 = 2; 
12) X r=n-]l, n- 2; e, 1, 
12,1) b[r] = brr] -LE жәе 1071, 
(j= 2, eeg ј,), 
12.2) MR ј„ ат ME j. <], + 1, 
12.3) NEXT r, 
3.2 对 称 等 带宽 矩阵 的 消去 法 
由 于 不 带 行 姿 换 的 高 斯 消去 法 在 整个 消 元 过 程 中 ， 每 个 行 
上 第 一 个 非 零 元 左 俩 的 元 宗 将 始终 保持 是 零 ， 因 而 当 矩 阵 4 是 
正定 对 称 等 带宽 拖 阵 时 ， 则 在 分 解冻 
A= LDLÍ | (6.3.3) 


м. ы 


214+ 


H, ЖУБА АЗЫК АЕ, ит Я, рах 
КЕ, ЪТ ару. ME 
d,,=1/l;; (6.3. 4) 


时， 分 解 式 (6.3.3) 是 崔 一 的 。 
设 玉 为 4 的 半 带 密 ， 比 较 66,3.3) 两 端的 下 三 角 部 分 ， 有 


а= Zl dal О) 


j 
z 之 ЛА, 


k= 


pan 
Гаа И 
ГЫН 
i 
lisaa ЎТ. (6,3.5) 
h =1« 


{„=тах‹[,к—-т), 


| Өө 
| Х хох t 
Í s . .- ` 
° r + = . а a 
i + 了， р.р Ве и 
| X x x() + - ° - r 
+ r < + э у 
t к. зы Юе, Ор 
„АЕ. м. 4. Q. e W. 


f 

16.13 FALL, ЯВНА 
H ES 6.13 中 所 示 的 计算 1 所 需 的 信息 ， 包 括 画 “x ”处 的 元 
Ko KELPE A i 之 前 已 经 算出 的 信息 ! 画 “e” 处 的 
元 素 是 A 注 下 的 4,;， 可 见 工 中 的 元 素 可 以 逐 列 按 由 上 H F B 
次 序 也 可 义 逐 行 按 自 左 至 右 的 次 序 进行 计算 。 当 新 BJ Lu PK H 
以 后 ， 即 可 用 它 来 取代 а. 的 存 贮 位 置 。 由 
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LDLTx=b,LTx= b,LD) =b, 
可 得 
b =b, - УЛ 
Ра- 1 
х,= (z: - р> L, X, улы (6.3, 6) 
т, = пах (1,1 - т), р: = min(m i +m), 
ш A Bo E= Ә ЕНИ АН T — ЖЕ ЖОШ LI m iim 
+1] 时 ， 其 地 址 检索 关系 为 ; 
А,Ь ,] 1, (6.3.7) 
i =i,j =j-i+m+l. 
于 (6.3.5). (6.3.6) 中 省 aza las 82 LEr i-r+m+ 11, 
ик —1 + +1], e, ДИВЕ ЕСЕ НОВЕ УЕ 及 求解 
的 计算 公式 。 
算法 6.3.2 ”对称 等 带宽 矩阵 的 消去 法 : 
J) Bm =m+1; 
2) i=l, 2, i, 
2.1) Æ t= тмах(1,і- m), 
2,2) 对 了 = 1+1, is 
2.2.1) 101, -і+ т.116) - ът] 


ў - 1 
~ TLEi k-i+miL[j,k-j+mJ]/L[k,m1l, 
А”! 


2.3) b[iJ—(b,- S LCi, k = i + m JOERI )/LE ml: 


4) Ж i= n n-i, "i, 
4,1)  t=min(mi+m), 


* 246。 


4.2) В] = (bri = È Lik, Ile m Jsb[kJ)/LLi, m J: 
5) NEXT i. 
3.3 对称 变 带宽 和 矩阵 的 消去 法 
当 4 是 对 称 正 定 的 变 带宽 征 阵 时 ， 其 分 解 式 
| A=LDL" 
中 ， 工 在 每 个 行 上 的 半 带 宽 应 与 4 在 同行 上 的 一 致 ， 这 时 工 、 
万 的 意义 与 3.2 段 中 的 规定 是 一 样 的 . 
在 4 是 变 带 寅 的 情形 下 ， 工 的 计算 公式 与 4 是 等 带宽 情形 
下 的 区 别 仅 在 于 ; 应 拒 公式 (6.3.5) 中 求 和 符号 的 下 限 t,= max 
(I,r - m) J 20 
t. =max(m;. m) (ї<їт), (6,3,8) 
这 里 m;,m, DIER i 行 第 + 4; ES 1 АЕО 的 列 号 ， 它 
{72725 911281, r $r БЁРК ШЖ. TE TEH 相 
应 于 {6.3.5) 的 公式 : 
| TER Ti БАЛА» 
la =a, D klaja ` (6.3.9) 
Е ч š 
т,=1- Вт, =r-B,, 
Б, = Di; 一 È Л 


х= (5:- У). |  (6,3,10) 
k” i 
м ЖЕ е РЕ IJ F = ЖАЛУ РГЕН ДЕ FE — ЖЕ Ж?Н 
E[1:S] 时 ， 据 地 址 检索 关系 : | 
LCS) = AĽi, j], 
s=d[i] +j—i, (6.3.11) 
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I=1,2,* f = M; i, 

这 里 | 
s= >) (B;+1), (6.3.12) 
= кыы: 


m d (k) ЖАНУЯ k 个 对 角 元 在 工 数 组 中 的 位 置 . 对 于 (6.3.9)、 
(6.3.10), 54У Ж Lis lars ++ R 29 АП] + к 1), L[d[k]]， 
即 可 得 出 对 称 变 带宽 存 贮 下 的 矩阵 分 解 及 方程 组 求解 的 计算 公 
式 。 注 意 到 公式 (6,3.10) 中 计算 x; 时 要 用 到 工 在 第 i 询 中 的 
数据 ， 而 工区 域 的 形状 对 列 是 非 凸 的 ， 因 此 检索 关系 (6.3.11) 
RAG р РАН AEH, BGU TL; 便 应 ЖОК. 
ЖЖ (1, Ра Ра ААК д, 
m=i -—d[il+dri-11+1<j=<i (6.3.13) 
AE Вр ау, 
算法 6.5.5 A ERRE BERNE E: 
1) 对 i= 1,2,1, n, | 
1.1) Bio =d[i -i,m:=i- (d[i]-—d[íi- 1J+1, 
1,2) Xf j=m,, +, i, 
1.2.1) E ja=d[j]—-j,mij=j— (401-46) – 11) 
+1, m; = тах(т,,т;),іј = +], 
1.2.2) ЬШ1=ЫЙЛ- У) LCi ++ 
k]/L[d[k]], 
1.2.3) NEXT j; 
1.3) ьї}&(ъї1- E LUi + кыс) аге), 
1.4) NEXT i; 
2) b[n] bln]/LLdin)s 
3) 对 了 = 了 一 1 1， 
3.1) #5=0, 
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3.2) Ж К=ї+ї1,+=,һ, 
3.2.1) B ko=d[k]- k, 
т,= К – (dtk] -d[k — 1]) +1, 
3.2.2) 如 果 masi<k， 则 
S<-S+ 了 [Ko 二 订 b[K]， 
3.2.3) NEXT к, 
3.3) b[il=< ФФ[Ї11—5)/4[1]1];, 
4) NEXT і, 


жао ж 


6.1 当 按 压缩 存 贮 方式 把 对 称 正 定 矩 阵 存 人 内存 时 ， 试 
1) 建立 压 绽 存 贮 和 矩阵 与 原 矩 阵 的 地 址 检索 关系 ， 
2) 导出 用 压缩 存世 和 矩 血 元 素 表 示 的 有 关 消 元 及 回 代 过 程 公式 。 

6.2 证明， 在 对 称 正定 左 状 阵 的 Cholesky 分 解 

А = LLT 
中 ， 工 的 任意 一 行 上 的 半 带 宽 与 各 的 同一 行 上 的 半 带 宽 相 同 ， 

6.3 在 链 式 存 贮 中 ， 如 果 央 行列 信息 出 错 不 能 检索 出 元 崇 的 地 址 ， 试 
编 出 能 诊断 这 一 情况 并 予以 敬告 的 程序 ， 

6.4 ЛЕВЕ ТЕЁ ЕВ, ТАЕ У i AR шл: Е ТАО Я: ЗЕЯ 
或 最 末 一 个 非 零 元 ， 试 写 出 相应 
的 检索 步骤 。 

65 在 链 式 存 贮 中 ， 设 第 j 列 ` 
б ЖСН 59) i, Fk KE 
MA DETRE ЕН A + Etu Bd 
零 元 信息 条 首 址 ? 8 

6.6- &EW8 6, 14 为 某 一 对 称 正 
定 和 矩阵 的 无 向 图 为 


试 分 别人 以 Xc, Хр, Xos Хв Хн Хро Хз Xr М Xay Xr X ys Xes XE, Хв 为 次 
序 写 出 相应 短 阵 的 Clolesky 分 解 的 下 三 角 阵 出 的 非 零 元 分 布 的 情况 ， 两 
种 排序 中 以 何者 为 好 ? 能 个 据 此 提出 一 盘 排 涿 的 建议 ? 
6.7 用 Tewarsen 方法 编制 第 大 次 消 元 过 程 中 的 求 列 主 元 的 子 程序 。 
6.8 用 Markowitz 方法 编制 第 上 次 消 元 过 程 中 的 求 列 主 元 的 子 程序 。 


96, 15 
6.9 im SSE ID s си 
宽 并 求 其 外 形 ， 
6.10 据 .上 图 以 节点 12 为 根 写 出 分 层 结 物 中 各 万 的 节点 ， 按 CM 方法 
和 КСМ 方法 重新 排序 、 求 出 商 邵 排序 下 的 先 阵 的 带宽 和 外 形 ， 
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第 七 章 “ 线 性 方程 组 的 迭代 解法 
сва е Е 


线性 方程 组 的 直接 解 靶 ， 对 于 低 阶 方程 组 是 很 有 成 效 的 。 
对 于 高 阶 稀 蔬 方程 组 ， 灵 前 虽然 也 介绍 了 各 种 有 效 的 方法 ， 但 
是 由 于 有 存 贮 量 大 , 编程 序 的 技巧 要 求 较 高 等 缺陷 , 在 实践 中 术 : 
免 会 遇 到 一 些 困 难 。 渤 代 法 则 是 克服 这 方面 缺点 的 有 效 方法 ， 
迭代 法 与 直接 法 的 根本 区 别 在 于 ， 后 者 由 使 每 一 步 的 计算 都 是 
精确 的 运算 ， 得 到 的 仍 是 近似 解 ， 而 前 者 则 是 从 一 系列 的 近似 
解 中 去 获得 澳 足 精度 要 求 的 近似 解 的 。 由 于 人 渤 代 法 必须 郑 虑 收 
敛 性 和 误 兰 ， 所 以 需要 根据 问题 的 背景 和 和 条 宾 去 选择 合适 的 方 
法 , 即 收 敛 速 度 较 快 的 方法 。 这 是 研究 选 代 法 的 两 个 重要 问题 。 
现在 我 们 以 三 оваа, зовон вечан 
方法 进行 回顾 ， 
设 三 阶 方程 组 为 
NA А ' 1. 
G, X, +2,,Х, +а,4Х; = b;, i | (7.1.1) 
Е +@15Х› +033% = bs , 


Їа,,50(1=1, 2, 3), (7.1.10 变形 为 


а b 

Ху = ¿= 12 x e бїз жылы АРИ 

а а b ' ; 
{х,= -Lx 一 一 23XS 十 一- | {7:1,2) 
А 22 _ 022 а: МЕ 

а 
X = — —l yx, -一 了 2 X%， + 3 _ 
3 033 033 


把 它 写成 矩阵 形式 ， 则 为 


х; ат! '0 -Qs ~a) (Xi 
x, |= d,s ü, 0 — 3 ху 
х; в;1/\-а;, -@;, 0 х; 


(а! ` (b, 
+ а |b, |, 
| ж b; 


将 (7.1.2) 写 成 选 代 格 式 ， 就 得 到 简单 选 代 法 的 迭代 格式 ， 


а | 
| «ту _ Gi; х, а - b 
' X, ч mm- 15 _ 1З x | m оф 1 5 
l Gri 211 а; 
à a - а b j | 
А ( x = — Еа Ym 2, (7.1.3) 
ац азі {23 ， 


l xm) = – аз 3 xm Lie yin- 1) 十 b 
G33 a33 ass ° 
第 2 式 时 ，xi" 已 经 计算 出 来 了 ， 在 做 第 Зо, хо Н 


| х= = Сіз т-р 213 yem- 1: + b, P 

G а 211 

а а b, ` 
жж 0 = с а Dp 9 (7.1.47 

22 

a a 
x= 一 一 3 Lx — 32 ух? + bi. 

a33 G33 G33 


这 就 是 GS 法 ERER. шах КЕ и 
速 迭 代 参 数 ， 即 所 谓 松弛 因子 ， 并 将 (7.1.4) 改 写成 
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XO = Grr xm- 1› 5; Сіз уота р Ph- + (1а-вф)ух”-!', 
por a PEG. 
: 1: L 


САПЕ э у a-si, 
42; üz 04) 


СЕСЕ кы XX + 《1 一 OO)X9 "7, 
(1.1.5) 
这 就 是 逐次 松弛 法 的 近代 格式 ， 可 简 记 成 SOR 法 。 如 果 设 
~ | 0 0 0 
D = z; » L= -ü,, 0 0 | 多 
| deyi 03; -üz 0, 
10 一 9 -0 lbi x, 
е? 0 -1 |, b= 0, |, х=|х, 9 
0 0 0, |b х, 
ЖТА ВАЗ СЕНУ з Ж 
x= D (1+0) "10+ D Hb; (7,1,6) 
СБЖ К Ж Ж 
х= р (рх +Ux" Y +D 1b, 
或 d- ртр) х= D UX" O + D7! 
BN x” = (I- D LY ID Ux" P +U- DILY !D bi (7.1.7) 
SOR 法 的 选 代 格 式 为 


хх" =@(D `! 1" +D ТА 
+р 8) + (1-@)х" р, 


或 . (I~ 0D L) X ™ =0D UX D+ (1 -0 x™ 0 

a | +@D 1b ; 
即 x” = (I-@p`tL)  ((1-@)I+@p'iu)w"` n < 
+ -aD L) toD th, (7.1.8) 

ща = 1 时 ，SQR 法 化 为 GBS 法。 а m 
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可 以 把 三 种 返 代 客 式 写 或 统一 的 形式 : 


x™ = Вх t? +g, (7,1,9) 
其 中 和 矩阵 B RORE (7.1.9) RAA {К ЕЕ. 
А ТЫЙ DEA 
Ax=b, (7.1.10) 


其 中 4 Жө, x, рн, 28 A= D- L - U, 
其 中 | 


а, | 
0 | 
D = а,, | 
б | 
\ ann / 
| 0 
0 
І, = --й)\ Ü Е 
Y vån] ° =—@һһ-{ 0 / 
0 ~aj; -ün ` 
| Ü 
U = ; 
0 KA —G, ix i 
1 : 0 ` 2 


则 迭代 法 (7.1,6)、(7.1.7)、(7.1.8)、(7.1.9)7 同 样 成 立 。 
对 于 任意 的 初始 值 x*”， -由 (7.1.9) 得 出 的 问 量 序列 х, 

x, +з, хх", +=, ЭҢГЕР [FE x*, BH x* 就 是 方程 

#8 (7.101) 的 精确 解 。 因 此 迁 代 法 实际 二 是 一 种 从 已 有 近 W 

解 去 计算 新 近似 解 的 法 则 。 从 (7.-1. 9 看 册 ， 新 还 似 解 xm 是 已 
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有 近似 解 x" 的 线性 函数 ， 这 种 迁 代 法 电线 性 迭代 法 .在 本 
章 的 最 后 一 节 我 们 还 将 介绍 非 线 性 和 迭代 法 , 此外， 由 于 (7.1.9) 
ШВ ЈНА, НАКЕ Х-и 
迁 代 法 ,如果 不 仅 依赖 前 一 次 的 近似 解 ， 而 且 还 依赖 前 面相 邻 
K 次 的 近似 解 ж, т, MK M RAKAR 
法 。 例 如 Chebyshezr 半 迭代 法 就 是 二 阶 挝 代 法 。 从 (7.1.9) 中 还 
п, Жет AA. ТЖ x 的 规则 均 是 不 变 的 ， 这 种 迭 
代 法 称 为 定常 选 代 法 。 Chebyshev 半 和 迭代 法 还 是 一 种 非 定常 的 
ЛЕ (Е, 

我 们 梅 造 选 代 格 式 的 月 的 是 区 求 麻 方程 组 的 解 。 因 此 ， 在 
构造 迁 代 格式 时 ， 必 须 和 福 意 迭代 苇 的 极限 是 否 是 原 方 程 组 的 
解 。 如 果 对 于 任 取 的 初始 癌 量 x':"， 由 (7.1.9) 所 产生 的 向 量 序 
列 {x} 者 有 相同 的 极限 ， 并 日 其 极限 就 是 原 方 程 组 的 解 x", 
则 称 婉 代 格 式 (7.1.9) 是 收敛 的 ， 否 则 称 为 不 收 合 的 。 

定理 7. 1. 1 对 于 任意 右 端 向 量 $ 和 初始 向 量 х0, At РА 
《7. 1. 9) 收 合 的 充 变 条 件 是 $0B) т. RESO ж ж B КЛИШЕ 
径 。 : р 
证 明 а, BORRE (7.1. Diki HERIR x*, ВП 

x* = Вх*+&, 
Ж EREC, 1. 9)4+4Н#{@9 


хх Вж" шн" у; 


р x, 1.1) 

则 有 J 
а Ве D pipt = 12) 

据 假 设 E 


1їтп/°”? = lim Bp"e = 0, 


mo 


故 必 有 limB"= 0， 因 此 StB) <1, 


n? Bhs 


充分 性 。 设 5(8) 之 1， 则 I-B 非 奇异 ， 从 而 方程 组 
(1-B)x=g | 
青 唯一 解 ， 记 为 x**。 由 S(B) <1， 可 得 limB" =0， 故 有 


гаг" = lmpB"r' = 0, 


w W 


BU : limx'”= zx". 


L.L. 


РРЖ, ABS SE T ООК, IH z P ZTE 

KS NER. 
由 (7.1.12)， 可 得 
"тэ В" rol 
Ek, в" аар ИСР АНУ А, ш 果 要 
Elre Ellr lR e 00 <е<1) 
Rp Пи sellr' |, 
为 此 仅 要 求 | 
181 ев dBm "е, 

南边 取 对 数 ， 得 到 

ine>>mintllB"15)， 
即 m> -lne/(- linlarD， | (7,1,13) 
ШЕЙ, ARWR e WERK, MEARE b К 5 
( -In||B"||/m) 成 反比 , 这 个 量 愈 大， 所 需 的 迭代 次 数 就 愈 小 ， 
因此 ， 人 

定义 7.1,1 #RR,(B)= – 二 lnlBn жшк, 1.9) 的 平 
Зв. 

由 于 平均 收敛 速度 难于 求 上 出 ， 因 此 我 们 往往 用 一 粗略 的 估 
HAKR C. EB 仅 是 有 线性 初等 因子 的 矩阵 , 则 必 存 在 B 的 
| 线性 无 关 的 特征 向 最 系 x;， Xas x, 和 相应 的 特征 伟 , Аз, 
226 。 


ө, А. РРА Er”, it 
r= Saks 
í“ I 
代 人 (7. 1, 12) 得 到 


п м 
ri” = È e Bx, = 之 а;А{%; 


_ maf м Y 
= (S(B)) (ву) а,х, 
两 边 取 范 数 ， 使 有 
| my < À; 7 j 
ir™ il< (S(B)) рр, a xill. 


当 间 很 大 时 ，ilr'*" 收敛 于 零 的 速度 取决 于 (8(B))” 的 大 小 ， 如 
果 要 求 ir" 中 <e， 那 么 ， 选 代 的 次 数 m 必 须 近似 地 满足 


(S(Byy)"<e, 
即 m> ( —Ine) /( —In(S(B))), (7,14) 


ВРЕТ ЕЕЕ ЕСЕ т E; ( — In (S(B))) 成 反比 。 同 时 ， 还 可 
以 证 明 lim (В|) = = S(B)。 | 

定义 7.1.2 #KRR(B)= -ins BAERE (7,1,9) 的 渐 
ЮН. КАС. 

AM R (B) Н КРИКА Д. 显然 ， 
谱 半 径 508) л, ДСС. 1Н а) ККАО НЕ $: 
可 靠 的 估计 还 是 (7.1.13)， 而 (7.1.14) 仅 是 粗略 的 估计 式 。 特 
别 ， 当 B 的 按 模 最 大 特征 值 所 对 应 的 Jordan 块 的 阶 数 大 于 1 
时 ， 实 际 兴 代 的 次 数 往往 要 比 估计 的 次 数 大 得 多 。 应 用 (7,1. 
14) 时 必须 注意 这 一 点 [参看 Iteratire solution óf large Цпеаг 
systems P85 一 P87。] Б: 
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$2 ж ж 欠 松 弛 法 


逐次 松弛 夺 是 一 阶 线性 定常 适 代 法 ,对 于 一 类 特殊 的 短 阵 ， 
如 果 松 弛 因子 @ 选 得 恰 :1， 它 的 收 仑 速度 会 比 Jacobi 方 法 和 
GS 方 法 快 得 多 。 通 常 我 们 把 @>1 [АШ CE ROU NE Ж 
КЖ, П оо 1 的 松弛 达 代 汶 称 为 低 松 弛 选 代 法 .不 加 区 
别 ， 则 绕 称 为 逐次 松弛 法 。 松 弄 关 了 了 选 在 什么 范围 内 松弛 法 才 
ERA? 是 我 们 最 关心 的 门 题 之 一 。 下 面 我 们 将 在 数值 分 析 的 
基础 上 ， 较 详细 地 来 讨论 逐次 松弛 法 的 收敛 性 和 最 佳 松 驰 因 子 
的 选取 问题 、 
2.1 乏 次 松弛 法 的 收 伍 性 | 

定理 7. 2. 1 HORREM, жна, 1, ORR 
要 条 件 是 0<o<2。 (7.2.1) 
„ 证明 设 (7.1.8) 的 选 代 征 隆 为 
| Js= (1-®р 'L) (1-Ф)[+®р!Ш7, (7,2,2) 
则 j | 


det (Ja) = det( Q- @D7' L) 71) det((1-—@)I +@D Чу) 
=(1—-@)', 
В, ЖРЕТ RM EZRA 1-0)", i 
S(J)>]|1-0]. (7. 2.3) 


据 定理 7. 1, 1。SOR 法 收 伍 的 充 要 条 EW SU) ТА, 必须 
[1- -®©[<1, 即 0<o< 一 2。 

实用 中 碰 到 的 系数 抢 阵 ， 多 数 是 对 称 正定 的 。 例 如 ， 用 有 
限 元 素 法 求解 弹性 结构 的 静 力 平衡 问题 ， 就 可 归结 为 解 一 个 系 
数 逢 降 为 对 称 正定 的 线性 代数 方程 组 的 问题 。 对 于 这 类 系数 箱 
阵 ， 收 敛 性 问题 现 已 得 到 了 较 好 的 解决 。 
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定理 7.2.2 ША АЗИЈЕ i, W) 0<oa<2 Ч, Ж 
АЕ E tro НО. 

证 明 因为 4 ЖЭИЕ, ИТИН 

A=D-L-L, (7.2.4) 
J = I-@D- Ly TU -oI +D 7, (7.2.5) 
设 4 YJ AJE — FE хоо AMAIRE ЈА, M 
J X= Ах, 
HD  (I-@)I+@D L х= АЧ -oD IL)x, 
(1-о)х+ор {х= Ах - QD Lx), 
MUA DER, 1+ ‚ 

(1 -OX DX+ OXHL х= ) (x Dx -@х"},х), (7,2,6) 
нтр НЕВА ИЖ ЖЫ IF S, KEE $ p= х" 
рх, Nij P AEX 22, X (XL xX)" =x Lx, НА хрх в 
+18, jx” L” x=a- IB. КА (7,2,6), F] 

(1-0)p+oia ~if) = А(р-=(а+18)), 


因此 
А = “О - @;p + Фа ~ iog 
Б D- oa – і::В , 
|a= Lp-@(p-0))' +O B` 
I (р-@а)? +оо? В? , 
由 于 


(p—-@(p —a)) `— (p— @aG) ` = ро (2 -@) (2а –р), 
利用 4 的 正定 性 可 得 
x! Ax = xH px — Xx LX—x! Lx= p- 20 0, 
以 而 ， 当 0<0<2 В, EA 
(р-@(р-а))?– (р -®т@у?<0, 


š +8 
! 2 (p-@(p-—-a)) ` +Q `B ` 
„ыы: (р-от,%+°8% <l, 
所 以 S(J.) <l. 
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据 定 理 7.1.1，SOR 法 收敛 。 
кык а nsn sr D 


[в EPAI т, 2.7) 


了 
37, ШЕКА ҖИ ЕБ ЁЁ. ШЕ=Ь>Ә—1 Ий, (7,2,7) 有 
严格 的 不 等 写成 立 。 则 称 A 为 弱 角 对 角 占 优 阵 。 若 对 所 有 的 
值 , (7.2.7) 均 有 严格 不 等 号 成 立 ， 则 秘 4A 为 严格 对 角 占 优 阵 。 
定义 7.2.2 如果 存在 mp 阶 姑 列 和 矩阵 P ， 能 使 六 阶 方 阵 4 化 
为 : 
/ Al Аш jy 
РАР? = | ) (7.2.8) 
\ Ü Ao | 
其 中 An. А 3929235156, ША HTAR, ШЖ R 
#358. | i 


|1, XJ T BB 


A = l; 
一 | 0 2 0 
,—1 —1 一 1 1/ 
存在 矩阵 
‘0 0 0 1 
0 1 0 0! 
Р = э 
0 0 1 0 | 
sl 0 0 0; 
使 得 
f. =l. = = 1) 
3 -1 =] 
РАР? = | * 
| 0 2 -1 
0 0 —1 7 
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ЖАГА ВЕ, 
дж ВУР ДАХ: БАНЕ А 0 ЕЕ, ВА, 
它 可 改写 为 
РАР? (Px) = Pb, (7.2.9) 
若 分 别 把 Px 和 Pi 记 为 ?和 ji， 并 把 P4P 按 (7.2.8) 的 形式 进行 
分 块 ， 则 (7。2. 9) 可 以 写成 为 | 
(Ац. А}. \ (y, |+ (h, 
9A) ‘ys) lh, 
即 系数 和 矩阵 为 可 约 乱 阵 的 方程 组 ， 可 以 约 化 为 两 个 较 低 维 的 方 
程 组 来 求解 。 又 如 


› (7.2.10) 


^зе әй эф 4 
Б 3 —1 0 

А = 
0 一 1 2 -i 


\ ð 0 -1 1 
为 不 可 约 的 弱 对 角 占 优 阵 ， 其 det(4) = 8 尖 0， 不 可 约 的 弱 对 角 
占 优 阵 是 否 一 定 为 非 奇异 第 阵 ?可 以 证 明 如 下 定理 ( 留 作 习题 ) . 
定理 7.2.3 若 4 为 不 可 约 的 弱 对 角 占 优 阵 ， 则 4 Ж АЕ 
奇异 阵 ， 即 det(4) 550, 
定理 7.2.4 МЕЖЕВАНИЕ: НА 
WAF о {8 0<о<1, H SOR 法 必定 收敛 。 
证 明 ISORA ft ЕЕ МЈ 
„= -ëD ID 7 ((1-Ф)ғ+әор Ч), (7,2,11) 
H#rhA=D-L- ОИЕ S(J.) <1, 
用 反 证 法 ， 设 J, 有 一 个 特征 值 4 满足 {守之 1， 则 二 一 村 应 
SAREE, Mig. 2 = 0 HE 
To~ Af= (R—@D L) 1C(I—@6@)I+ р-у -AI 
= (р-р) -oO)T+oOD-II-1G-oD-iL) 1 
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Re 


= (1-®р- ір) -10(01-Ф- А) +ор- 0 +Ар-!1) 


= (1-0-4) а-әр-чә|- D4 er 


эл, үр рт}, а 
其 中 1-@-4 关 0 和 (1 -opD-ID) Ер ЊВ, НФРА= р - 1 
-U ЖАГ ЈР БЕ, ВЕЕ, D 'A=I~D'L-D ©U № 
КПЈ d LETTERED  ! A 中 的 零 元 素 及 其 位 置 与 
WI- ayp iD U- үштү б1р ЖЕШ 
一 样 ， 故 后 者 也 是 不 可 约 征 阵 ， 此 外 又 因为 
A= (%+Ф-1)+(1-@), 
[|А| < [д+0- 11+ (01-0), 


| lato- 112213] ~ (1-), 
所 以 


2 jel MO _ 
| 二 ji 人 全。 
Н охо | 
АГ: 
р- = А 
于 是 Бе =s ы T= зн э Г KAS 


也 是 弱 对 角 占 优 阵 。 据 定理 7.2.3，(7. 2, 13) ЮЗЕРА, 
故 (7,2. 12) 的 右 端 为 非 奇 异 和 矩阵 ， аы 
盾 ， 于 是 S(T. <1 
由 于 当 @ = 1, SORER GSH, 因此 有 下 述 推论 ， 
推论 ЧЕКА 为 不 可 约 对 和 角 占 优 时 , GS 方法 收敛 。 
SOR 法 的 收 钱 问题 与 松弛 因子 0 的 选择 密切 相关 。 松 弛 因 
子 选择 得 当 ， 可 以 大 大 提高 收 伍 速度 。 由 于 松弛 法 的 应 用 比较 
沁 ， 所 以 如 何 挑选 最 佳 的 松 闻 因子 ， 具 有 特别 重要 的 意义 。 
2.2 最 侍 松 弛 因子 的 选取 
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Pe у а 


前 面 我 们 已 经 证 明 ， 线 性 迭代 法 收 化 的 充 要 条 忻 是 ， 迭 代 
矩阵 的 谱 半 径 小 于 1， 谱 半径 愈 小 ， 收 化 就 愈 快 。SOR 法 的 ЖК 
代 乞 阵 的 谱 半 往 为 8S(Jo) ， 它 是 @ 的 函数 。 如 和 何 选取 最 佳 松 弛 办 
子 @。,， 使 得 

Saso) =minS(J.) 
ВРАТЕ ВЕЗАО, BE, РАЧА ВЕЕ, АВТ 
TAE. 的 理论 结果 。 实 际 计算 时 ， 大 多 是 用 计算 经 验 来 试 
算 确 定 的 。 仅 对 某 些 特 殊 类 型 的 矩阵 ， 才 有 确定 or; 的 理论 公 
式 。 在 此 ， 我 们 重点 讨论 具有 所 谓 “ 人 性质 4A” 的 矩阵 的 最 佳 松 
弛 因子 的 选取 问题 。 最 后 ， 将 介绍 用 试 算 法 确定 最 佳 松 继 因子 
的 方法 . 

定义 7.2.3 车 能 将 个 自然 数 的 集合 WW= (1, 2, <=, n), SY 
成 两 个 互 不 相交 的 子 集 S IS; (815, 05: = W, S.S; = 人) ,使 
得 n 阶 矩阵 A 的 所 有 非 零 非 对 角 线 元 素 а, (0,90, i=j) 的 足 
FHG, D, MER: IES IEN 或 jE51，iE Ss， 则 称 此 
BEHRA “HERA”. 

例如 。 将 线性 方程 组 


| 1 — 0.30009 0 – 0.30898} йү \ 
i 0.30009 1 – 0.46691 0 | и х | 
| 0 – 0, 46691 1 – 0. 2141 | | 
‚ – 0. 30898 0 – 0.27471 1 i 1и x, 5 
j 5.32088 ` 
| 6.07624 ` | 
Е (7.2.14) 
-8. 80425 
\ 2,67600 


的 系数 矩阵 记 为 A， 到 Si= {1, 3), S, = {2， 4}, таф: 
阵 4 ЯЖ “ERA”. 
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如 时 把 方程 组 (7.2.14) 的 第 2，3 两 行 互 相交 的 并 把 2，3 两 
列 也 互相 交换 ， 则 得 I 


1 0 -0.30009 | {з 
0 1 -0.46691 一 0.27471 | х3! 
| 一 0.30009 – 0. 46691 1 0 х, | 
“一 0.30898 – 0.27471 0 wo k 
/ 5,32008 | i 
_ | 78. 80455 | 
`1 6.07524 |" 
\ 2,67800 / 


EFS = 41, 2), 5,= {3，4}， 仍 可 验证 ， 新 系数 矩阵 也 具有 
人 性质 4 。 
定理 7.2.5 抢 阵 4 具有 “性质 4” 的 充 要 条 件 是 存在 排列 
Ж Р, 13. | | 
PAPr-| "| 
5 D, 
EHD, DEHA SEE, 

证 明 ”必要 性 。 只 需 将 具有 “性 质 A4?” 的 矩阵 4 的 号 码 属 
TS, 的 各 行 排 在 前 面 ， 把 号 码 属于 S, 的 各 行 排 在 后 面 ， 并 把 
号 码 属 于 S, 的 各 列 也 排 在 前 面 ， 把 号 码 属于 S; 的 各 列 排 在 后 
面 ， 便 得 (7. 2. 15) 型 的 矩阵 。 

充分 性 。 其 证 明 作 为 习题 。 

对 于 线性 方程 组 中 的 方程 式 和 去 知 数 ， 在 次 序 进 行 重 排 以 
后 ， 虽 然 方程 组 的 精确 解 并 太 改 变 。 但 是 ， 如 果 使 用 迁 代 法 求 
解 ， 其 收敛 性 和 收 伍 速 度 却 要 引起 变化 。 辐 样 对 于 具有 性 质 A 
的 和 矩阵， 次 序 经 过 相应 的 变化 后 ， 虽 然 还 保持 “性 质 A>， 但 
其 解 的 收敛 性 和 收敛 速度 了 要 变化 。 那 末 ， 方 程 组 和 未 知 数 的 
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(7.2,15) 


次 序 应 以 怎样 的 排列 为 好 呢 ? 下 面 我 们 先 看 两 个 例子 。 
例 7. 2.1 对 方程 组 (7.2.14) 使 用 SOR 法 求解 ， 取 松弛 因 
子 @=1l.16， 实 际 达 代 次 数 和 结果 见 下 表 。 


Г; 0 | O 12,3095 


a 
6.1722 -5,2320 Е 3.6492 2 | з. 3.6659 


| 
9. 6941 |в, 1177 - 4.8999 4,4335 5 | 1 1.3313 


8. .3398 Te 6.3188 | = 4,5914 ЈЕ 3.9200 жо | i 0. 二 


2 


aa 
e? 


кл ы А 
4 — 6.4480 | -4.7151 к 0004 04 | 0.0787 
Е 


і 


| 8.5137 6,4202 | SAE DDR | 4,0157 А 0, 0288 


ree — о S аа ойпан 


6 о, ~ 4. 1005 4.0047 | едо 


1 в, 4868 |6, 4288 | -< 7031 | Ë юв | oq 


例 7. 2. 2 如 果 将 方程 组 (7. 2, 14) 的 第 3 列 与 第 4 ДЕЙ, 
第 3 行 与 第 4 行 交 换 ， 则 得 


| 1 -3,30009 一 3.30898 ТЕ j 
| ~ 3,30009 1 0 - 0, 46691 |; x, ' 
| -3,30898 0 1 -0,27471 | ку 
: 0 -0. 46691 — 0.27471 1 | x, / 
| 5,32088 | 
6.07624 · 
=! 2,67600 l мз 
| -8.80455 ; 
对 这 个 方程 组 ， 用 SOR 方 法 求解 ， 取 松弛 因子 仍 Ж o= 1,16, 
其 实际 迭代 次 数 及 结果 购 下 圾 ， Б 
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K к| M 1 | ж | X3 | х р е; 

0 oj o | 0 j 0 | 0 | 12.3095 
1 ЕЕГ Б, 1722 |: -10 9.2138 | |: 2; Т 0818 | 6,2901 
2 ас? 1996 I -5.9369 | 5.7 Д 3.4629 |: 1.9833 


з B з |. = Б а 


| | 3. .9047 ІК: 0. , 4483 


а 4330 0 |. -4,7645 Е 6.3998 | E 9837 |» D, К 
Раг - 4 == 

5 | 4785 85| -4.7153 | 6.14220 | 4.0031 | 0,0168 

в YE _ 1, н Галан рон] 0. 0030 


EJ 8. 4874 КЕСА - 4,7032 | ! 6.4273 | 4.0065 | 0.0005 


РР РРР 例 7.2.2 中 SOR 法 收敛 
速度 较 快 ， 这 说 明 ， 线 人 幅 方程 组 的 方程 和 未 知 数 的 次 序 的 排列 
不 同 ，SOR 芒 的 收 伍 速度 也 将 不 同 ， 那 未 ， 倒 7.2. 2 的 排列 次 
序 有 什么 特点 呢 ? 为 此 ， 还 将 研究 一 些 有 关 概 念 。 

-定义 7.2.4 车 能 将 n 个 自然 数 的 集合 WW = {1, 2, =s m) 
分 成 个 互 不 相交 的 子 集 $1，S2，*…，Si( 即 W= ， U So 5 S, П S; 
= 0, i= j), КЕЛЕЕ A MRA TERRIEN fE а; 506152), 
Яв G, j), ЖЕД РАЙ: ЖжіС5,, <, JC S, i 
ma >Р], ES ШАЖЖВЕА RS B Ж. 

著 取 Si ={1}, S,= (2, 3), 5:3= :1 容易 验证 (7. 2.16) 
中 的 系数 和 矩阵 满足 定义 7.2, 4， 即 (7.,2,16) 中 的 系数 矩阵 是 其 
有 相 容 次 序 的 .方程 组 (7.2. 16) ЮЖНЕ АЛ ERA”. 

定理 7.2.6 共 知 阵 具有 相 容 次 序 , 则 必 具 有 “人 性质 A”， 

ЖЕ ” 若 短 阵 具有 相 容 次 序 ， 则 存在 满足 定义 7,2,4 的 子 
ES, бэз *”у Si 令 
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Wi= US;(i 是 奇数 )，W，= 05,0800), ШИ БИ E 


27,2. ЗЕЛИНА TES AS: ЕВЕ АЧ “ША”. 
{17.2.3 设 知 阵 A 有 共有 如 下 形式 ; 

D, Ul 

Li D, 0. 


A = (7.2. 17) 


К Кс) 
Ss D 
其 中 D; G=], 2, e, MAW HBE, Loeis Ui (б=1, 2, ==, 
m- 1) 为 相应 阶 数 的 长 方 阵 。 若 将 所 有 对 角 线 于 块 Dsp (К=1, 
2, e0) ATA ECAS o WEAF H Dar- 2, +=) 的 
行 编 号 记 为 $;,， 则 容易 验证 ， 集 合 $S1 与 $; WEN 7,2,3, H 
此 矩阵 和 具有“ 性质 A4 ”。 如 有 果 将 妃 中 属于 对 角 线 子 HH Di 的 
行 编 号 记 为 $x， 显然 ， U S= w, S,1S;= 0 (Че), 而 Be 
易 验 证 这 样 划分 W 的 子 集 是 满足 定义 7.2,4 ЖЕНУ, AUE 
Е (7.2.17. АТТ. | 

АЛАНА КЕНЖЕКЕ: A ЖГ Б а у Т. 20 Y HEBH 
这 些 性 质 ， 首 先 假 设 det (А) 中 不 为 去 的 一 般 项 为 

та) = EA geara Onean) 

X Fma) АЈА 56 а,ә i>a G), 则 а; «20 28 
FORTRA; WRI, Ша, сЕ НЯ E 59563, 

定理 7.2.7 设 A 是 具有 相 容 次 序 的 矩阵 ,I 和 j 分 别 为 m (а) 
Ж рас 和 i<a (i) 的 元 素 的 个 数 ， 则 1 =j， 即 具有 相 容 次 
FREA, Ж їтўїз\б®ї (А) 中 非 零 项 中 的 元 素 ， 取 在 主 对 和 角 
线 上 方 的 个 数 与 下 方 的 个 数 是 相等 的 ， 

证 明 基 A 具 有 相 容 次 膏 ， 存 在 满足 定义 7,2.4 的 子 集 S1， 


#937, 


Ses So BHX Tao, #0, #icS, Шаб) > IB, a (i € 
Seo 4000 <, tG) ESk. 现在 定义 一 个 nn 维 向 量 ， 
B= (Bis Bas ees Ba), FEH 8, 是 这 样 确定 的 ， 当 iESs В, 
B;=k。 向量 8 具 有 如 下 人 性质， 当 о ао 0f, 

(1, i>a); 


Bi- В, у= О. 
于 是 l= $) (Bi —Boi)), j= (8. ~ В), 
f= 1 
багс) сая 
因为 1~i= $ (Bi— Bau) — > ‹В„‹›—В;) 
isadi) pecado 
= È ИВ B.) + (8,—В,) 


| = DB) = TB- Ban 0, 

所 以 [=]. 

Ж ЛАСА" " HARRE А р= diag (a; sas ge, 
av)， 竹 阵 巨 为 4 的 下 三 角 部 分 的 元 素 组 成 的 下 三 角 些 阵 ， 丝 
降下 为 上 的 上 三 角 部 分 的 泡 崇 组 成 的 上 三 角 和 矩阵 ，e，X 为 任意 
非 零 实 数 ， 则 


的 值 与 & 无关 ， 
定理 7.2.8 如 果 太 具有 相 容 次 序 且 其 对 角 元 全 不 为 零 ， 
又 矩阵 B=T- diag(ai1)4=D L+D 'U, Я) 
D 车 上 是 B 的 了 重 特征 值 ， 则 -也 是 召 的 了 重 特 征 值 ; 
2) # A 是 J 的 特征 信 ， 则 存在 B 的 一 个 特征 值 h ， 使 
A+m— 1 =n, (7. 2. 19) 
3) ШИХ ВЛ ШЕН, À 满足 7.2.19)， M) 4 EJ, 的 
一 个 特 征 值 。 


+ 238 * 


Че{@(аЕ+а!Е+Кр) ` (7.2, 18) 


证 明 ”因为 4 具有 相 容 次 序 ， 所 以 B - I 也 具有 相 容 次 序 。 根 据 
定理 7. 2,7 的 推论 ， 取 a = +1, К=н, Mj 
det(B -AD = det{ — B — HI) = (— 1) "det(B +#D , 
以 而 B 的 特征 多 项 式 可 写 为 | 
det(B—gBD = (—1)'u" (и? —B3) (а? да) (07-р), 
其 中 4; 是 B PIERRE, TEWI БГ. HHE (7, 2,12) 
J. — А = (I—@D L) ICED L+ OD + (1-0 - А), 
所 以 
det (J,—AD = det hoD IL+OD !U + (1-@- A)T), (7, 2,20) 
因为 4 BS 1822 H Носа, WET. 2.7 的 推 
论 可 得 
det (J, ~ AD = (0A7) "det (Аз D- L+ A 3D- р 


1-6-4 


f pan Р 


1 
= (ФА:) "det (D !L + D'U 


1 
ү ви ЮР ° ° (7.2.21) 
Аъ 0 1 


设 和 是 Jo 的 特征 值 ， Ж: АЗе0, lt ода В 的 特征 值 ， 记 为 
k, TE 


| 


А+®—1=®Н)*, 
Ж 2=0, Њ (7.2.20) 得 出 det (g) = det(oD-IU+ (1-®)1) 
=0， 因 而 必 有 1-o=0， 即 串 =1， 故 对 任何 4 值 ，(7.2.19) 
均 成 立 ， 因 此 结论 2) 成 立 。 
设 上 是 B= 1+ D !U 的 特征 值 ， 日 4 满足 (7.2.19), 
aN. Йй = (+o - 1) ГАЗ, ЕЕН (7.2, 21) 
det(J,— М) = 0 
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Пл 是 ,的 特征 值 ， 如 果 和 4=0， 由 (7.2,19) 得 到 w=1， 于 是 由 
(7.2.20) 可 得 det(J。) =0， 即 4= 0 是 1 的 特征 值 ， 从 而 结论 3) 
Б. 

定理 7. 2.9 如 果 4 是 对 称 正定 矩阵 ， 有 具有 相 容 次序 ， 并 
HB=I-D''A=D ` !L+D-`:U, H 

1) BAHEA XA BR.S(B)—] 


ї 2 
[eso + e su: - (0-3 ] о<о<ё 


2) SJ =! 2 
@-}, #=<@< 2 (7.2.22) 
R #1 &}&5ОК?Е АУЕ, ау 
P= = i+w T-S’ (7.2.238) 
507) = @-1, (7.2, 24) 


证 明 ”由 于 A 是 对 称 正定 和 矩阵， 所 以 1 - Di AD рх 
和 矩阵。 又 由 于 
p=I-D`lA=D`(r-p'iap DD}, 


所 以 了 与 I- D Ар 相似 ， 从 而 8 的 特征 值 均 为 实数 。 
根据 定理 7.2.8，`4& 是 B ПЛЕЧИ, -e th в e 
征 值 ， 而 且 当 4 满足 
Ака -1=0|шд? 
时 , 4 是 /的 特征 信 , 设 АПАС ERRANA EEA. l.l 
和 定理 7,2.2， 当 0<8 之 2 时 ，!4( 和 |4s13 均 小 于 1 由 线性 
代数 知识 可 得 
ь|<1, BISB) <le 
当中 是 召 的 特征 和 值 时 ， 方 程式 (7,2.19) 的 两 个 根 
• 240 ° 


L 
з и + Со?р? — 4(w— 1) 2 2 


2 


À 


, C7, 2, 24) 


aa olll- iotr a0- DI? 
2 

均 为 J, 的 特征 佳 ， 而 且 

Mq = О, å; =4:=1-0; 

Hop? — 4(@ — 1) Ой, А, 52.20) 969 08 |А, = 
|2,:| = 1%—1|; 

Motu? — 4{@ — 1) ОВЕ, А 5А: RE НАА = (@ — 1). 

因为 我 们 甘心 的 是 当 ww RHA SO) 最 小 ， 所 以 只 要 
Wo € (0, DAKETA, ЮА, 5А, 中 按 模 最 大 的 一 个 来 讨 
10. ШЖ, ЖЕ ЕЗ: о ЗЫ 

|4|22]4 |, ТА 2219-11, 14110-11. (7.2.26) 

М G7.2.24 TELE H, РРА ЛЕНУ о, |А, 是 | 的 单调 增 
Юй. К, Кш=5(В8›[, h RER KRSI.) , #10508) 
= б, 则 


(7, 2, 25) 


S (J) = 


бед? 2 м, 5 17 2 
25, 08 Ахау z (7.2.27) 
(7.2,27) 
0265,2 400 1) = 0 (7.2, 28) 
的 根 为 


2(1 土 1-Š2 ). 
ЕЕС 
因为 5,1, MADE (7.2.28) EKE (0, DARA AM, 
jua, i | 


2 


A od _ E 
So а+ (4-5,3)? 


@ = 


° 241 ° 


Se 2 
-1+ (4a. (7,2,29) 
1+(1-&, °) 


因此 ， 当 0<o2<e 时 ，(7,2.28) 的 左边 取 正 值 ， 于 是 


1 
2c 2 _ Е Мз 
SJ,) = (t GS. 0 1 ) ; (7.2.30) 


y 


当 aa< 辣 ，(7。2.28) 的 左边 取 负 值 ， 从 而 (7.2,27) 右边 
аон 
SJ) =@ — 1, (7.2.31) 

AE (7. 2.22) 成立 。 

(7.2.22) #17 Y 5801) отуд, ШЕК БС 的 
最 小 值 ， 首 先 过 论 0<e<ë Н, ШЫГ S (JO HR C, 2, 22) 的 
第 1 式 ， 若 令 

pio) = [osS —4(@—1)]!'*, 

д 


45 чы) = + (@S,+ р(@)) (S, + p (@)) 


1 405; — 1) 
= 一 一 (о + í - -一 -一 
2 A р(®) Lp (@)S, + 2 — @S1] 


‚ оо < 
-{<° Ш (7.2.32) 


=— соо, 已 一 而 一 0 时 。 


~ (p en] 
Plw; 


ат SU) = 了 [сеж (@))2 + (05, + p (@)) °Š 一 


十 @ | 
С )) (оро) $, + aS} Ф,р'(®)) 
-位 0› КОА 二 时， 
~ о, з -— 01], 


t PZHS >» 


由 此 可 见 ， 当 0<@<B 时 ,S(J6) 是 单调 下 降 函 数 ， 当 6<0<，。 
时 ， 567.) =б@—1, 是 单调 上 升水 数 ， I IL, Ш o= @ |, 502) 
达到 最 小 值 ， 政 


BA, 40=0, = @ BF, SU) =©@—1=@„,—1,„ 
松弛 因子 @ 5507.) 之 间 的 关系 ， 以 及 en 的 位 置 见 图 
PS WEN 


1 G op: 2 "ў 
图 7.1 起 松弛 法 的 谱 半 征 


НЕ 7.1 可 以 看 出 ， 当 名 从 @ur: 的 左边 逐渐 增加 而 趋 近 于 
Oor Н, 5, 的 雪线 斜率 趋 于 一 22， 即 切线 趋 于 垂直 于 ñH, 
但 当 @ 从 о,,, 的 右边 逐渐 减 小 而 趋 近 于 2o: Bf, $ (OQ) 的 切线 斜 
率 不 变 ( 恒 为 1), 这 就 是 说 Oor- ДӘ 5. + Аоф, АУЛ 
的 谱 半 径 将 较 之 前 者 为 小 .所 以 ,在 实际 计算 wo; 的 近似 值 时 ， 
жож КТ Oor ER o $ F о, 更 为 有 利 ， 
例 7. 2. 4. 
人 +иу, (х, y) =0, 0<x,y<1, 
u [T =g(x,y) = 0, - 
其 中 了 是 边 长 为 1 的 正方 形 边 界 ， 其 真 解 显然 A u(x,y)=0, 


240, 


(72042) 


在 单位 下 方形 上 ， 用 边 长 h = 1/3 作出 均匀 的 正方 形 网 格 ， 
并 对 网 格 结 点 进行 编 笃 ， 如 图 7.2 所 示 。 


7,2 ріж 


А 1 2 
记 и, =u, 2), а=, 2), us = aí. 2), и, = 
“(+ a) 设 tt; 的 近 似 值 为 Ww;(i= 1, 2, 3， 4), KW. 精 
度 要 求 为 hw"™ н 07, 

解 ” 将 方程 467.2.32) 腐 散 化 后 ，z#t 的 近似 值 w 可 以 表示 
为 如 下 形式 :; | 


-Wi = (ъз + Wat Br +11), 


у 


Wz (W + Wit Ë; + ОУ 


(7.2.33) 
аи аи * 


j 1 
(w= 4 ИМ: Ва T Ein), 


LAA g =0, MUT. 2.33) 可 以 写成 如 下 形式 
Ам = 0, 


a 244 ° 


其 中 , 1 Р т 5 
ыы - ® | 
1 1: | 
А | š -7 T4: [wa 
= š м = т 
ГИТ У ТЕ. 
4 4 | K 
1 1 
ss ш” Ü 1 / w, | 
“0 1 1` 
жыл ДЕ йы. a 
B=1-D :A= 7 
14 1 0 
‚1 1 0 j 


因为 det (hI ~ B) =u- =0, 


、 六 1 1 
所 以 B KJA IEE Ы, =i, = 0, а=, H, = 79» WSB) = 
1 - | 
T 又 因为 人 的 特征 值 为 1 =й, =1，hs = 1 一 于 = 二 ,= 1+ 


半 = ! 卫 ， 所 以 A 为 对 称 正定 怎 阵 ， 据 例 7.2.3 知 ，A 具有 相 窜 
次 序 ， 故 使 用 SOR 法 的 最 佳 松弛 因子 Oop 可 选 为 


‚ 2 ыз эң 
Por tl sB = 1.072, 


ЖК 初 值 为; we = 0.222222, уу = 0), 222222, Ww 
= 444444, wW, = 0), 111111, #9 SOREA, БНЧУ o 
对 迷 代 次 数 的 影响 。 实 际 迭 代 次 数 见 下 表 ， 


° | 送 代 次 数 | o ја Ж. 


在 实际 计算 中 ， 由 于 S(B)-- 般 也 是 难于 事先 求 出 的 ， 于 是 Oo 
的 值 无 法 事先 确定 ， 因 出 ， 在 计算 中 ， 如 何 确 定 o 的 近似 值 
是 一 个 比较 困难 的 问题 。 这 时 介绍 一 种 在 使 用 SOR ФЕ НУ 
程 中 顺便 求 出 oo 近似 值 的 方法 。 

шоЄ (0，ou) 时 ， 由 (7.2,22) 的 第 1 式 可 以 求 出 8GB) 用 
КЗ 表示 的 形式 


S) + (@ — 1) 
S(B) = (7, .342 
oS, уу? 
Б, WEER 5 Oo, 508) WHAE F, АНАН о, 


的 近似 值 。 

首先 取 一 个 不 太 大 的 正 数 ， 使 之 满足 OSa 然后 
tE SORS EIR 

x= Jm l+ g 
进行 迭代 。 于 是 有 
一 XXX 一 = = 

| а а ат (7,2, 35) 
щ у, 是 具有 线性 初等 因子 的 实 矩 阵 ， 并 且 S (J) 是 J 的 按 模 最 
大 的 单 重 特征 值 时 ， 由 于 | | 

| 一 

= параз а ДВТ), тоор (7.2.36) 
当选 代 经 过 若干 步 迭代 АЕ ТЕ TERE, ВА ЮЗ) 
的 近似 值 ， 再 代入 (7.2.34) 求 出 S(B)， 然 后 利用 (7。2. 23) 求 出 
Фо 的 近似 值 。 再 利用 这 个 @,,: 代替 原来 的 w 继续 进行 迭代 ， 
直到 找到 比较 清 意 的 Oop: 的 近似 人 为 止 。 使 办 这 个 方 靶 ， 由 
于 难于 判断 S(J。 НУТ АЙН ДЕҢ КРАБ ОЛ ЇЙ, ИЮН 
ЗЕЕ 4 Ж ЖЕРИ (Н b ЭЕ SZ ЖТТ Я ANR Ж ВОД ДАЈ, ш 
想得到 较 好 的 wo 的 近似 值 ， а ЖИЙ ТАА К. 

#46 = 


ЖЕ УЖЕШ, ЖЕЕ В 的 按 模 最 大 的 特征 值 上 可 以 使 
用 基 些 办 法 估计 出 来 , 这 时 就 可 以 按 (7.2.23) 算 出 Op 的 近似 
йа ойи ы айны шы ийаш 

容 次 序 的 短 阵 在 求 得 Oo 的 近似 值 后 ， 应 该 采用 比 它 稍 大 一 点 
的 值 ， 作 为 实际 计算 中 的 松 范 因子 .。 

对 了 那 些 日 前 述 没 守 理论 公式 可 以 计算 最 住 松弛 因子 的 矩 
陈 ， 我 们 可 以 用 试 算 的 办法 来 确定 它 的 近似 值 。 最 简单 的 办 法 
是 ， 以 同一 初 妈 疝 量 出 发 ， 用 不 辐 的 松弛 因子 @ 和 迭代 相同 的 次 
数 ， 然 后 比较 它们 相应 的 剩余 或 误 痊 ， 半 选取 使 币 余 或 误 疮 之 
模 最 小 的 松弛 基 子 作为 最 仿 愉 好 因子 的 近似 和 值 。， 这 个 方 共 既 简 
单 ， 又 有 效 。 特 别 ， 当 使 用 者 需要 多 次 求解 具有 相同 系数 矩阵 
的 方程 组 了 时 砚 是 如 此 ， 

有 时 还 豆 以 根据 求解 问题 中 最 佳 松 她 册子 的 性 质 ， 利 用 选 

代 过 程 中 的 信息 ， 猎 蔚 估计 出 来 ， 而 在 丫 算 过 程 中 应 尽量 不 要 
占用 过 多 的 计算 时 间 ， 
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企 使 用 迭代 方法 之 前 ,特别 是 当 系数 阵 和 A 的 条 件数 很 大 时 ， 
为 了 加 快运 代 过 程 的 收 伊 速度 或 者 为 了 适应 迭代 和 矩阵 所 具有 的 
人 性质 的 需要 ， 有 时 旨 对 原 方程 组 进行 事先 处 理 ， 即 预 处 理 ， 

在 使 用 SOR 方法 时 ， 求 新 的 近似 解 是 按 分 量 逐 个 地 进行 
у, ЖЕ) НҢ. 如 能 适当 进行 闫 处 再， 确定 新 的 近似 角 
еен 

маж 

设 线 恬 方 程 组 为 TE 
Ах=, 13.) 


r RAF + 


其 中 4 为 对 称 正 定 阵 ， 为 了 讨论 方便 设 A 的 主 对 角 线 元 均 为 
1， 则 4 能 分 解 成 下 列 形 式 
А=1-1,—17, 
于 是 方程 组 
( By = d, 
{ B= ([-@L) 1lA(I— oL) T, (7.3.2) 
(у= (1 917) х, d= (1- @L) lb 
与 (7, 3,1) 等 价 . 
使 用 迭代 法 求解 时 ， 方 程 组 (7.3.2) 与 (7.3.1) 的 迭代 矩阵 
是 不 同 的 ， 其 谱 半 径 一 般 也 不 相同 ， 因 此 它们 的 收敛 速度 也 不 
一 样 。 如 果 对 变形 后 的 方程 组 (7.3, 2) 使 用 简单 迭代 法， 其 大 
代 格 式 为 
yt =4й+(1-В)у'*?, (7.3.3) 
它 与 原 方程 组 使 用 简单 迭代 法 计算 时 ， 其 步 又 及 迭代 效果 都 不 
同 。 由 于 B 起 三 个 矩阵 的 乘积 ,由 (7,3。.3) 从 у 计算 у” H. 
可 经 下 列 的 代 换 把 计算 过 程 分 解 为 更 基本 的 运算 。 首先， 令 


BYP = r, (7.3. 4) 
则 

у) sd, (7.3.5) 

于 是 
02 (I[— QL) ЗАС -OL) -TY (7.3.6) 

由 于 
~L) TY = xt) (7.3.7) 
ё (1- Ф) E = AXP = БЧ. 67.3.8) 


(7.3.4) ~ (7.3. 8) АРИУН РУЖ, 
算法 7.3.1。( 预 处 理 算法 ) 
» 248 ° 


1) Ж A e, xt, y= (р-р), 
2) HR(I-oL)d= b i-E d, 
3) ZF k= 0,1, +, К, 做 
3.1) ЖР? = АХ, 
3.2) Ш(-Ф)&#?= Ею Ж ок, 
3,3) YY =d+y F -gR 
3.4) 由 CT-oF)7xet = уо хо, 
3.5) па ГАЗЕ ДПА), 
3.6) МЕХТЕ, 


4) 结 京 。 
KE ka 是 允许 的 最 大 的 达 代 次 数 ，@ 是 预选 的 某 一 适当 的 因 


Fa 
定理 7.3.1 闪 灶 阵 A 是 十 对 角 线 元 素 为 1 WIRE E E 
阵 ， 则 当 @= 1, ERT.. DKA. 
证 明 ”要 证 (7.3.3), НЕ ШЕ5(1-В)<1, RERE B 
的 特征 值 为 k， 其 相应 的 特征 向 量 为 p， 则 
Вр = ёр, 


Rp 
(I— ФІ) TAU- GL) Tp= Hp, 


WAH pP ER, 182] 


pT(I-@JL) TAO ~L) Tp=H8p p, (7.3.9) 
令 
u= 1-01) 77р, 
H (7. 3, 9) {5 9] 
р `А® ~ up'p, 
v Av VAY 


U= 


тїр wo) (ov 


u Av 
РЕ -一 ar Er .3.10) 
(1 -@) yv Ov AV + 0207170 (7.8 
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故 当 只 = 1 BJ, 
-wh _ | 
н = РА (7.3.11) 
H РА25ЖЗЙЖИПЕ ҤЕ , Н = Тө = Ыр, (071)7220, В 0< 
u<1, ЖЕЕ I -BARIERA 1-5, В 
S(I- B) <1, 
实际 上 ，e@ 的 最 优 值 常 是 大 于 1 的， 但 这 里 参数 o 的 取 值 
不 象 SOR 法 那样 严格， 通常 可 用 @= 1 作为 近似 最 优 值 ， 
对 于 一 般 的 实 对 称 正定 矩阵 4， 可 以 将 它 分 解 成 
A=D- L-L, 
其 中 D= diag (G. CQ. зз s 0) 于 是 方程 组 
Ву=@, 
B= (рї —@L) -1A(D: -aoD)-T， (7,8,12) 
y= (D 3 —Ф17)ух, 
d = (Da 01) 15, 


其 中 工 = LD-: 与 方程 组 Ax=b 等 价 .同样 可 对 (7,3,12) 使 用 
HARRE, HEARERS CT. 3. 3) 相同 
yt =d+ (一 BY。 
仿 算法 7. 3. 1， 不 难 写 出 一 般 的 含有 实 对 称 正定 矩阵 A 的 方 E 
组 Az = 如 的 预 处 理 算法 ， 
算法 7. 3.1 (一 般 的 实 对 称 正定 方程 组 的 预 处 理 算法 ) 


1) © А. о, 097, яу = (D? 917), 


1 
2) 由 (D: -0@L)&=b， 计 算 d， 
3) XF k=O, 1, К,.х 做 
3.1) WP = Ажа), 


° 256 ° 


3.2) 由 (Da - @L)st2 = wo 计算 кэ”, 

3.3) ух" Е А 

3,4) 由 (D3 — Іт) 其 人 + О 求 и К 

3.5) WX“ 可 接受 则 转 4)， 

3.6) МЕХТЕ, 

4) Ж, 

当 4 的 条 件数 сопа (А) 较 大 时 。 可 以 通过 预 处 理 法 来 降低 
条 件数 。 当 4 是 具有 “性 质 4 ”的 对 称 正定 符 阵 时 ， 可 以 证 
明 ， 一 定 存 在 @( 如 =0)， 使 cond(B) <cond(A), 

如 果 将 A 进 行 三角 分 解 


A= LL:, 
令 рё - oL = L, 
Д) (7.3. 125 АУЕ 22 3 Ў 
В=17ФАЇЁ 7, y= LTx, 4=L-lb. 


于 是 也 的 条 件数 cond(B) =1, ЕИО ИЕ Ж. 
їн ЖЖ ТЛ 相当 于 求 4-!， 因 此 ， 寻 找 容易 求 逆 的 近似 三 角 分 
解 矩 阵 工 ， 是 -一 个 引 人 注 意 的 问题 J. A. Meijerink 和 Н.А; 
Van der Vorst 于 1977 年 提出 的 不 完全 分 解法 是 很 有 价值 的 . 
将 该 法 用 于 某 些 问题 的 处 理 ， 现 已 取得 了 很 好 的 效果 。 
3.2 Ж} 

分 坪 返 代 革 在 确定 新 的 近似 分 量 时 是 成 组 进行 的 。 先 将 求 
解 方程 组 中 的 方程 和 未 知 数 进行 分 组 ， 使 每 个 方程 和 每 个 未 知 
数 属于 且 仅 属于 一 个 组 。 进 行 迭代 时 ， 从 每 个 方程 组 中 局 时 获 
得 的 一 组 近似 解 的 分 量 ， 如 此 按 组 进行 计算 ， 直 到 求 得 全 部 新 
的 近似 解 分 量 为 止 。 

在 建立 块 送 代 格式 时 ， 分 组 的 方 革 是 可 以 根据 需要 来 选 定 
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BU. КЇЛГЇН CBR RUE y yq, ТАЛАК = (1, 
2, =, n) Б К ИТЕ, Ro Rans Re Ri UR, 06 
UR,=W B R f[|R;=0(1j), ХРТ H K. м H. X 3 
分 成 的 子 集 的 个 数 和 相应 子 集 均 相 等 讨 ， 才 称 这 两 个 分 组 法 相 
A. ША НЛ, 表示 ， 对 于 W={1, 2, 3) 的 分 组 就 


有 : 
По: R = 41), К.={2 }, Вз={ 3 }: 
H i: R, = {1,2}, R i =í 31 
П. R, = {1,3}, R. = (2); 
Hs Ú R. = {2,1}, R,=(3}; 
H: R, =1 3), R, = (1,21, 


УН АНЕ, ШАП = Па, "НП, п, Е АТАУ. 
组 法 ; К, = { k з к= 1,2, se, ily Пу 5 Пп, 


如 果 方 程 组 
Ax =? 
经 过 本 分 组 后， 变 成 
Au АА x, b, 
Asi Ani" Ann ), 
А: Kee ш бе... (7.3.12) 
A,A А„› e A... : ç x, > ` b ‚ 


其 中 子 块 A, (У,8=1,2,+е,‚,т) ЫШ A 中 行 号 属于 子 集 R. 中 
的 行 ,以 及 列 号 属于 R, 中 的 列 桐 交叉 点 的 元 素 按 原 顺序 排列 而 
成 的 子 块 ， 子 列 向 量 x mb, 分 别 是 列 向 量 和 b 中 分 量 的 序 
号 属于 R, 中 的 分 量 按 原 顺序 排列 而 成 的 列 了 向 量 。 经 过 这 样 
分 块 后 ， 方 程 纽 (7.3.12) 可 以 写成 


> А.Х, = b, (т =1,2,++,т), (7.3.13) 
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ati РАІ 


Day 012 Qa \ Хр b, 

| ol G G; Xi = b. (7.3.14) 
| | | 

“ G| 03: йаз N Xs ; b; 


HORENIA: Ri = 11,3}, В. = :2} 时 , JEH (7.3.14) 
HER. 3. DETÉN 


сараң X Gol РВ, 
| 11 1 | 1 у 12 We 1 А (7.3.15) 
. @з зү, Хз. (s> ¿ С. 5 
р у 
[G., G.,]' |+ [2:3 [x] = [b], 
Ху] 


HRT (7.3.13) RHE A, (= 1, e m) 1829 Ef FP, 
йөр лае АД TERTE ИЗ ЙЕРИ 
А, Е Жа =b,- А, хо ‚ (F= |, 2, ее. M) (7.3, 16) 


хк = >: B xk +e, (F = 1.2, e Mm), (7.3.17) 
ғ] 
г -A IA, Hrs 
Jeri Быз | т REN (7.3.18) 
0, Ме = S, 
c = A;1b,. (7.3.19) 
ПЫ т. 3.1707 ЯЙ J sN, 
хво = Вк + FT (7.3.20) 


H 


Ви = (гу?) CET, ШЕ = (DT) -1b, 
E = p) — А, DP = diag (А, і; Аззу "э Аһ) a 
AARE RAE (7, 1. DER 同样 可 以 写 出 块 松弛 
法 的 计算 公式 
= 0 (Б, - УЇ джик E 2i А х0) 
r= i 1 


z=r 
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或 xD =o,- У) B. x< +O ы: 


其 中 


JP = рор) (өр + (1 —@) P, 


- (1-@)A, х, 
(r= 1, 2, s., m) 


—(1—-@)у,хд?, 


е 1 


sml 


(F = 1,2, =+, M) 


将 (7,3, 22) 写 成 矩阵 形 式 ， 得 


xito = P xk? + (I —@]°) “lof, 


LT = (р?) "LAPA 
ШЧ? = (INTILAR, 


例如 ， 设 
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А J 


TI; 
А? = 


а 
- 
Åm ** A, al 


Ü ¿ 


° D Аз ... A... \ 


~ 0 

‚ Аз 
4 --1 0 
0 -14 
-| 0 ü 
0 —1 Ú 


А„- 
T 
-1 0 


(7.3.21) 


(7.3.22) 


(7.3.23) 


(7.3.24) 
(7.3.25) 
(7.3.26) 


H: R, = {1,2,3}, К, = {4,5}, 


b -1 0， ′ 一 上 0; 
а sP 7 -1 |, A=: 0 -1, 
NO —1 4 } 10 0 
-1 0 4 -1 
Аз\ p кү |. А [ i ,| 
pun Ë. "7 am =) J, 
0 Az- Азу 0 
АР ~: 
0 0 
15 4 1 ` 
Bo Be О оо О 
4 16 4 
365 56 56  ? 
CD-I1-| 1 4 15 
(D'™") =] EE 56 56 0 0 i, 
4 1 
т а E 77 
| .二 4. 
|9 0 t жүргү 
⁄ 0 Ü 0 0 
0 0 0 0 
| 0 0 0 0 
ә? =! I 
4 1 
Чо Os: 
1 4 | 
15159 9 0) 
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16 4 

MoM E s 

4 16 

pe к. О БЕ ЕЕ 
ШЧ! = | 
: t 4 ° 
йк А 
ооо о о, 
ооо 0 о 


НАЕ, ТЕТ е Е 阶 方程 
ЎН (7.3.21), ЗАМЫ РКИ, (А, HF A,, Abik 
变 化， 一 个 有 效 的 办 法 是 ， 先 把 А, ETIBOR, ЗЕЕ 存 
起 来 ， 反 复 利用 它 来 求解 (7,3.21) 中 的 ze U (КЕТ, 2, 66, m) 
如 此 所 需要 完成 的 计算 量 就 可 以 减少 ， 
完全 仿照 定理 7. 2. 2 的 证 明 方 法 ， 可 以 证 明 恕 下 定理 。 
定理 7, 3.2 若 4 为 实 对 称 正 定 矩 阵 ， 则 当 о<о< 2, He 
松弛 法 (7.3.21) 收 敛 。 
对 于 m 阶 方 阵 4， 使 用 开 分 级 法 将 W = (l, 2, =, n) y BË 
тб, Е mIRE Хх = (K... a | 其 中 
= Dii TAN 
1, ЖА ЕЁ, 
定义 7, 3,1 ЖАШЕХИН ЖА”, ШИ АА A 
ЕДА, 
定义 7. 3.2 дреха, ШИШ ШЕ A B. # H 
相 容 次 序 。 
ШЖ H = П, ЕХ ЖАР, Ж ЖЕ АБ НИ Ж Br 
称 的 相 容 次 序 . 
ША НД ПАНАСЮК ШР Е Н Ве = р 
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(7. 3,27) 


(DDA, MECHSE 7.2.7 的 推论 、 定 理 7.2, 8 和 定理 
7.2.9 的 方法 证 明 如 下 结果 : 

1) 行列 式 `= det(e A +e AP - кр) [ОЧ Es e ЖоК, 
其 中 g& 关 0，# 为 任意 值 。 

2) 将 B 换 成 B””，，J 换 浅 J 四 后， 有 类 似 于 定理 7,2,8 和 
SB <1 的 结果 ， 从 而 可 以 得 到 块 松 犯法 的 最 佳 松弛 因子 为 


(7.3, 28) 


1) 一 р) к ЖЕ 2__ 29 Я 
оі 1+ (I — (5(82)) 2) , 
而 且 


П! 
SOE у=  —1, (7.3.29) 


ТЕЗЕ БЕП] Еп, Ж А НАУ Ж КАРЕ A ТЕЕ 
具有 块 三 对 角 的 形式 
Au А2 


. ЕЯ Ara 
Айн. Aw 


这 种 形式 的 矩阵 显然 具有 五 相 容 次 序 。 因 此 ， 只 要 块 三 对 角 
阵 具 有 对 多 正 定性 ， 那 未 ， 逐 次 松弛 法 的 全 部 结论 者 适用 于 块 
松弛 法 ， 

块 松 她 共 也 是 一 种 解 线 性 方程 组 的 有 效 方法 ,特别 当 4.-, 不 
太 复 杂 ， 而 且 先 对 A, 进行 分 解 的 工作 县 不 太 大 时 ， 朋 该 法 往 
往 能 提高 收 伍 速度。 而 目 ， 对 于 那些 没有 “人 性 质 4A” 但 是 经 适 
当 分 块 后 可 以 具有 性质 A' 的 矩阵 ， 使 用 块 徐 弛 法 进行 求解 更 
为 合适 ,然而 尽管 松弛 甘 有 时 可 获得 较 好 的 效果 , 可 是 当 A-' 较 
为 复杂 或 者 求解 程序 效率 不 高 时 ， 往 往 液 不 能 使 总 的 计算 时 间 
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碱 少 ， 以 上 这 些 间 题 ， 在 使 用 块 松 线 法 时 也 必须 考虑 ， 以 便 根 
据 问题 的 基体 情况 决定 是 否 选用 块 松弛 法 ， 


8$4 Chebyshevy 半 和 迭代 法 


对 于 -- 阶 线性 定常 迭代 法 xm” = Bx +g, ЯСОН 
很 慢 ， 则 实际 意义 并 不 大 ， 我 们 希望 找到 一 咎 方法 能 加 快 它 的 
收 伍 速度 。 基 于 … 阶 线性 定常 迭代 法 的 Chebyshev 加 速 ， 当 
迭代 第 阵 了 的 特征 侍 均 为 实数 上 时， 往往 能 取得 落 好 的 将 果 。 
4.1 一 般 加 速 原则 | 

给 定 一 个 收 化 很 乙 ， 甚 至 不 收 倒 的 实数 序列 ,Xo，X1，"* 
Xo ， 记 为 {%;y， 我 们 可 以 由 它 米 构造 一 个 新 序列 ，Y osY1， 
“ө, ypy es A Mh ERES (у АСЕНА ВСН 
快 。 例 如 


Yo= Xo 


1. | 
yi = > Xe +X), 


у= уи +ху+х,), (7.4. 1) 


AJAI, iHa IMR (yj ЕИ: 其 至 当 {xi} 不 收 
ЭК, Yo ЈЕ. (Ус, БИА, 为 Сеѕато 
可 求 和 ， 
构造 新 序列 的 更 一 般 的 原则 , 可 以 先 考 起 下 列 三 角形 列 阵 ， 
Zon 
Qio Oil 
Oza @;ү Cos 


aee те» s... eoe 
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其 中 


а=}, m = ñ, l; 2, "о (Ta EA 
太一 0 
BA ERII: G, skh 


у; = = Ха, Xa i= 0,1,2, ... (7, 41.3) 


显然 ， жыр о i БВ a = 0( EE) Пра = 117, 
{У (х) ©дад=1/(Ё+1)(К=0,1,+е,1),(7,4,3) 59 
3 (7.4.1). 

求解 线性 方程 组 Ах = b Ау РЕЧТА СТ, L. D) B 
ВНА БЕЈ К, хор, СРУ ААХ = 的 解 x*。 
AUA FERESE RGA U ™ h 

и" Уо хе, 07,3, 4 
k = 0 
长 中 系数 em 满 是 条 件 (724.2), НОТЕ X GRRE 于 
ает, DA ОЕА. 

КЕС а DIRT, нр ЈА Н) Z. 2, 
(ие РУН Ax = b АЕ х*, 2 TATER RARA K 
ЖШ, + 

fe = к" — x*, 


ч 5; ` 
Um) = що — x*, (7.1.5) 


АСА ТС, A. 2) B| u TEL 


"т m 
ИОС T E ` єз 米 
теит аже Уин Уа, 


k= 
m т 
= № rb ж) %' СА? 
一 Мм mg X x* = У 8 " 
R=0 k ù 


H7. 1, 12) 得 到 
ё = ВЕ = Вико, 
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因此 


m= Dan BE O = pp (BDN? (7,4,5) 
À = O 
其 中 
р„‹В)= >]а„В* H Pall) =1, (7.4.7) 
йт 0 


为 了 使 (uy Rk ko х", 0277.0, 就 需要 limpn(B) = 0. 
MERER RESMA n (х) 是 存在 的 ， 例 如 pn(x) = х", ЖН) 
р„(В) = В", H-FS(B) <1, HAMA Пшр, (В) = 0, Н.р„(1) = 
1"= 1, 0 uxt, ЭБЖ, 应 该 选取 怎样 的 多 项 式 (7.4.7) 才 能 
使 向 量 序列 (ua 的 收敛 最 快 ? 为 此 ， 必 须 首先 卉 清 收 敛 快 慢 
的 度量 。 

类 似 于 $1， 我 们 首先 假定 B 具 有 线性 无 关 的 特征 向 量 
Ж X.,X,, ө Xas MT Ais Ars tts An 是 相应 的 特征 值 ,于 是 
(Be 可 以 表示 为 

71'Ф=а,х+а,Х+ ot Kn, 

N = p (В) NVO =a, Ppp BX), ++. +а,р,(В)&, 

= р. (А) OX, tp (ha) GX += + pn lAn) OK, (7,4,8) 
H kE DI th, ne 收 纹 于 零 的 速度 是 由 max |р, (А) AER. 
为 使 (u) 收 化 最 快 ， 只 需 选 取 所 有 m 阶 多 项 式 p(x) 中 使 下 
式 达 到 极 小 值 者 
[S Ф„(В)) = max|pn Q) |, 
ЕСТ = 
因而 ， 可 以 类 似 于 定义 7.1， т 
定义 7.4.1 Ж R, (pn(B) ) =lim( 一 六 ln(S(pn(B)))) 为 


半 选 代 靶 (7.4.4 的 新近 收 贷 速度 。 
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当 p,(x) = х", R.(p,(B)) =R(B)， 因 此 ， 定义 7,4.1 
是 定义 7.1.2 的 自然 推广 ， 
4.2 Chebyshev ЖЖ 

假定 如 的 全 部 特征 值 人; 都 是 实数 ， 并 且 满 足 如 下 条 件 
а<\;<8<1 (a<BpB), (7,4,9). 

其 中 a 可 以 小 于 - 1。 在 这 种 条 件 下 ， 用 Chebyshev 多 项 式 构 
成 半 和 迭代 法 能 取得 加 快 收 伍 速 度 的 效果 。 通 常 将 这 样 的 半 选 代 
法 称 为 Chebyshev Æ ik ft. h Fa ETAG, 所 以 
шах |p, (4,) 1 的 极 小 值 也 难于 求 出 . 通常 用 求 


max |p, (A) 1, 

人 | (7. 4, 10) 
Pall) =1 

的 极 小 化 问题 来 代替 。 当 然 有 
тах |р„ (А;) |< max |p, Q) |", (7.4.11) 
今 引 人 新 的 变量 
р= (4) = 4 (9+8) (7.4.12) 
В -а 


显然 有 7y(a) = –- 1, (8) = 1， 而 且 当 4 WE (7.4.9), -1% 
yY<1。 令 


л=у(1у=-—©2-(@+85) _, (7.4.13) 
B-a 
又 因为 
2- (a +B)>2 — (28) =2(1 - 0) >0. 
8-a>0. 
2— (a +$) - (8-а) =2 — 2820, 
所 以 


z>1, 
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HCA DARBAS 3 LB-OY +8 HARAP. O00489 l 


РО) 2 s.” о, +В +0 )= O, (Y) . О (7. 4, 14) 


ЕЕ, 
max, DA) 1 = тах lQn (Р) | 
Ж; 


是 极 小 ШАГ M (7, 4.10) 正成 


max | 已, (7) | = min 


x i (7, 4.15) 
Q niz) = 1 - 
这 个 问题 的 解 党 四 
ООУ) = Ты) pe Z), (7. d. 16) 
Hh Ta O т Chebyshev ZWI, 其 参数 表达 式 2 
写成 
x = Cos , 
{ opar, 
T, (x) = Cosmo., 


Ты(х) = cos (m arccosx) 

T су — a di 
wx Al qh B. Tem ВЈ. HH (U, 15) 的 解 可 得 (7.4.10) 的 解 
为 

p. (A) = ОУ) = 


= r, ( ы ул. ( 21839 } (7. 4,18) 


o,( a- = 


而 且 
min (max |p, с) |)= max Те [. аР Е r a| 
ar {ы Й о. д В ` 
a 
= т) | (7, 4,19) 
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有 了 paa) 的 表达 式 (7, 4.18) 后 , 利用 Chebyshev 多 项 式 
Tn G) К ME E Ka 
SN, = 2xT a (x) Tm- | (CX) (m= 1,22, 6), 


(7.4.20) 


再 通过 计算 pr (A) = Q mu +а „А! зз +G. À. 的 系数 B mi ЯА 可 以 
ти", 因为 


T (x) = 1, Py CX): = X, T, (x) = 25%—1, 
可 以 求 得 
Pa lA) = 600 = 1, и = х0, 
' I г 24- (B +G Р; 
p (А = Oin +a A= Ті! 3 ут) 
АИ е МЕНЕ s а 
5-a 2 (B +a) TB ' 
经 比较 示 数 ， 得 
ПОТЕРЕ 2 ире Р: у 
Пер Вер > " 2-(В+а) ° 
于 是 
u‘! 一 (8+a) му, .2 a? 
2 一 (8+C) 2-(8+а) 
2 | (В +a) ) 
= (BX +g) 一 -e © — x: 0 * 
2- (8 +a) € 2- (В+а) 
(7.4.21) 


ЛЧ, иН "Ж. BÆ, ХР PR ¿Ë Е Ж 
烦 ， 下 面 我 们 导出 利用 в", MRE” AE ER Ж 
式 。 从 (7.4.18) 可 得 


p. (B) =т„/ -2P ы! теат. ут. (2), 


Ңң (7,4,6) FOT. 4,20) К е. 
+ 263” 


go E 28, А +а)і MTh Је 


„эче: т. (- 2B- (8+@)1 ) 


B-a В-а 
/ B+ ， 74 
-re 
= of 2B- BHOI] Ta) pm 
=2[ В-а Г у" 
_ Tm.1(2) im- 1) (7 4 
T. 02)" я 7.4, 22) 


9 9ш хе КА ERER T 


“пшр 28 - GIOI p (т 
š; 2| В-а Ть.; (Z) М 


Tasa Z) еш 15 [2- — Etol 
T,. (2) н x ) 


Tn (2) Ta. (2) 
° ——-+ х* . . 5 
Tmel) Tmr1 (2) a чы 


但 是 


m a хал T, (Z) T,,- (Z) * 
了 一 2 Ку тл, + = x 
| (2 ) Tn+1 (2) a 


=2| z КҮНҮ" A | L xt 


Ты+1(#) 
iB) Т) ж 4 T, (z) 
ЕИН -RŽ = o M 
8-a Tri (2) B-a T... (Z) „л 


因此 ， 当 m% 之 1 时 ， 
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| Ты) _ аст т-а (2) em 


p-a Tmt1 G) T, 1 (Z) 


4 T,,(Z) 5 
+ Ка и Знаат А 4, 
B-a та к: 


ЕН (7, 4,21) 和 (7,4.25) 可 以 求 出 {WwW}。 如 果 令 P11 = 1, 
Ол = 22Т,- 02) 17,02), m= 2,38, (7.4.26) 
(7。4.25) 还 可 以 简化 成 


ц 0 т Dn { с2в - (В +а) ји" + 73 


(1—21) 4 1). 
将 T., (Xx) =2хГ„(х) - Т,-1(х) АВ Е 1/2хТ„(х) 得 到 


Ieg _ _ 1 一 1 2ХТ 16) 


T,+ (X) С э = ИЕ. 
2xT,, (X) 4x? T, (X) 


Ж 
由 (7. 4,26) 可 得 


而 


法 的 简化 计算 公式 为 
. 初始 值 х9 = o, 


| 2 а + В 


АЕ 0) 
: и х‘, 


ЕЕ = уе {0) be i te 
2-(а+В) BX +8) ~ y a+ 
(7, 4.27) 
Unrb _ бя+1 год m 
u оду PRT (+ 有 TU +2 } 
+ (1 — Purp) Ш" * 
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11% D. = [1- A: р | , т= 2,3, ° 


Ее: (C +o) 
ер R-i 
及 这 些 计算 公式 市 可 站 大 出: Chebyshev 35 рдЕ E 
HEEE а Кд. А КД TOE Ж 2 Жа ВА 
了 到， 在--- 股 情况 下 可 运用 畦 征 值 向 计 的 有 关 方 法 汶 定 和 有 。 
FRIIK E Chebyshev 3 {КТУ Sura. 


ЕСЕТ АЕ: 


га е ИС yii 
Tai) =. Ан — 5 nae 


doy араа СВЕ реа 


从 测 推 得 
i кы Ж АДЕ 


Hap 
a Ыы |. 
I+. 1-02 ° “z 


T ZR, 当 Pl œ > 7, Г гр: = 1] š 1-0, F ДЕ iid | 
(7.4.19) 可 以 推出 


266, 


T= 


要 (7,4,8) Ж 


м meco li, теш — X*->0, 
Bl M” -eat Д, 不管 АДЕЕТ (7,1,9) ДЕЦ, 
х а БЖ ЕНУ Chebyshe， 1071 ү д СНО. 
па RUE KAII MSAGA TE 20 КСВ), Che- 
byshev Kik Д ИЕЛЕ, X R (р„\®)), ЗВ. ЛА 
зано he di aio? КТЕР ВЕ. 


бад 7,4,1, R (PaB) ) =lim(- а 1015р, (8000, H 


Sp (BY) СГ)! 


МА 
| 1 . ЖЕ 
R (р. СВ): lim, -i 18 T(z) ) 
А | 1 йй ыг _ „ 
БЕ — m In 1+T2 : T Int, (7,4,28) 


男 一 方面 ， 我 们 可 以 作 HY 2E FE pR р, OO =G x +G, 其 中 
a te = 1, 使 
ша, 5 001 тах h; | 。 


这 里 4; JL 2, (А4) 分 8 И. ВПР. (B) EJ AS ПЕЕ. 由 此 可 得 
R(B)=çR (P, (В)) =< — ln £ =; -一 lnc。 
因此 ， 
R Pa) ~ -Int 


TRB)? “ [D-ino]? 


7 
其 rir=: q TS 1 - ‚ 0<о<1, 


Hu ZE Jë fT]: Ht: BJ: 
А -int 
Bm 
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&g=e"°, Hla= -Ino, HF 


_ 1а g = 1 mi-i- 


itio 2 1+vVi-or 


1 К 
2 (1 089 *= (1-е-*®"уз 
ее (ей — D бро (20)? 


1 


并 且 
еса EEFT ggss 
тұт =а+1п(1+ 1-0? ) <а+ (1-02) % 
1 1 
=а+ (1 -е7%%) а<а+ (1 -~ (1 – 20)) з 
= -lng + ( — по) z, 
所 以 ， 
in 一 一 一 < 一 一 -一 E 
c(-2ino C An TT yor 0 + (– 2100)? 
(2m S (~2ino 3 ©  (~2lng)”? ° 
Hi T o-=1 时 ， 
oc- 2lno)* у 187+ (~ 2ln0) 
(—21no) + ' (~ 2lno) 
故 
_ In о 
П 1-0? _ 
д (- 2Ing) /a = 
Rp 
; ~ lnT = 
r ЫЕ Зи 2: 


这 就 是 说 ， 当 o 接近 于 1 时，Chebyshev ҳе ФЕ Ду 
伍 速 度 比 原 来 的 一 阶 线性 定常 迭代 法 〈7. 1. 9) 的 渐 近 收敛 速度 
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快 得 多 .因此 ， 当 了 的 特征 值 全 部 是 实数 时 ， 采 用 Chebyshev 
半 和 迭代 法 来 加 速 迭代 过 程 是 有 效 的 ， 
4.3 简单 迭代 法 的 Chebyshev ME 

前 面 我 们 讨论 了 一 般 的 一 阶 线性 定常 迭代 法 的 Chebyshev 
加 速 问题 。 如 果 满 足 条 件 的 某 种 迭代 法 已 经 给 出 ， 问 题 就 转化 
为 如 何 选择 其 中 的 参数 了 。 我 们 以 简单 迭代 法 为 例 来 说 明 这 个 
问题 。 

设 线性 方程 组 为 Ax = 了 ?， 其 系数 矩阵 A 是 对 称 正定 的 ， 其 
相应 的 简单 迭代 法 为 ; 

X 1 =GX" + e, (7.4.29) 

其 中 G=TI-D-I4， A=diag(a;), c=D-`b, 


因为 


б=рїср%# =1- p tap š 


B. D 2 AD ЕФ, ДСН u AKA B. 小 
于 1 ， 于 是 存在 实数 &。 8 使 


а<и<8<1, 
据 (7.4.27)， 简 单 迁 代 法 的 Chebyshev е ЕТ: Ж 
ш" = Fy e ~ (В +a) I]u°” + ге} 
+ (1 — p )u”" Р, (7.4.30) 
在 (7.4.30) 中 ，G 的 特征 值 进一步 满足 某 些 特殊 条 件 时 ， 
计算 格式 变 得 更 为 简单 些 。 


D 当 G 的 所 有 特征 值 均 为 小 于 1 的 相等 实数 , 即 2 = 时 ， 
显然 ， 可 取 Pr=1，(m=1,2,…) 从 而 (7,4,30) 恋 成 
= qig L(G- aut" +e]. (7.4.31) 
又 因为 S(G—ap =0， 所 以 迭代 格式 (7,4.31) 的 收 伍 速度 是 非 
常 快 的 。 
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2) ШТЕТА ЯАКОВ АЕ, НИР СС) 
<l, а-а P= 806), Т | 


ИЕ Е а r) _ 2 ОКЕ А К 
жа B- А Е 2506) 27 е * (7.4.32) 


将 (7.4.32) 代 和 人 (7.4.27) 得 到 


p =1， pz=27(02 一 (SG 
D,,+1 = (1--(S(G))2p,) 1 (=< 2,3, +"), (7.4.37) 


而 (7.4.30) 25р, 
и"! со (GB + e) + (1 -Pp DET (7, 4,54; 


因 些 ， 在 这 和 害 条 件 |, Chebyshe; rE ERN РАО u[ P. H 
(7, 4.34) 107, LIDAR. 
ЫЕ ТТР 7. 1,28), EHATE K EAO НЕ ЛУ 
满足 
SG) 


R Cpm 600) т —1nr, T= Е +. j £ (5(С))? ‚ 
RI 
In 239067 


R (р, (С)) > — 
1 1-‹5(О))? 


то eE 
Е н И 
2 1+5 1-(8(6))2 


ЯН RAW., ЖОМ АОВ Т Жу Ooo HIRA 
Ж МӘ, т ты: ж-т . ç 2 
R Aa asin sa 3 И l= (5(С)02 1) 


1 — Z 1 - (S07)2 (7.14 36) 
[б ЗА (буз тог: 


= -ln 
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当年 阵 和 是 中 有 相 容 次 主 的 于 正 定 囊 陈竺， 比较 (7.4.35) 积 
(7.4.36, ПН, SOR ЖЕГИЛЕ ДЕТЕЙ А yË 
代 法 的 Chebyshew p uperi pu Bf Hio SAPE HRE A 
POBREA ЖАКАШ ЖЕТПЕШИ ЕСЕ ЗЕН, ЛЖ, ЖЮОК 
АЕ R: 5220 FIR e 


$5 非 线性 迭代 ; 


АДЕН ВНЕ ГТ УЗЕТО EMA 
Ж. Ж б ВЕ ШЫН КЕТПЕШ ЕН А: ШЦ 
ҖАЕ 3 Е, ТЕЛ TAR DAI ИКТЕ ЕРЕН ТА, |H 
ТЕЕ НЕН ЖУ, MO И ЕУЛИЕ. JOSE, ЭОД 
bẹ- ЭрК, ПЕ RARA, XJ+ n r Eee ik 
{п Е. EET AUNA EA E REN TRA 
A MUREA -AEk E ETD 直 演 应 用 于 
ДЕЧ ЕЛЕЧЬ ЗА АВАГ АЯ, ЛЕ. 近年 来 受到 广 这 
的 重 被 。 它 与 其 它 沁 从 汉 碎 比较， 不 民 的 是 ， 在 贮 最 较 太 和 计 
РАЦ, 
5.1 线性 方程 组 的 等 价 问题 

没有 线 放 方程 组 


> P РЕ 
pà G; :X; =b, (1 = 1, сз t€? 5 и) C SQ 1) 
ка. 


EEAX= р, Ми ж OBE А O ARTE EI. 
Жн F$] Ba БОТОВЕ iv Ba 88 


| ] ҳа < 
ZZ < Ке 1 
Fix) == J „зв РАЈ T =< Бух; 
Беу = i=l 


= b (Ax, x) - (b,x), (7.5.2) 


RE AMHER, b= (b,b, «6, р.) 7, 如果 我 们 把 1 
ЯЕ ВС E pR E: n 维 空间 R" 中 的 … 点 ， 那 末 ， 我 们 可 以 证 明 下 
列 定理 。 

定理 7.5.1 ПЕ x* 为 线性 方程 组 《7.5.1) 的 解 的 充 要 
条 件 是 ，x* 是 极 小 值 问题 (7, 5.2) 的 极 小 点 。 册 | 


Е(х*) = minF (x). 
хе КЗ 


证 明 ”因为 cj= air 所 以 


AF 
E Уа; x; -b= – Р, 
ВЛ gradp(x) = Ax -b= —/г, (7.5.8) 


也 就 是 说 ， 将 任意 向 量 x 代 人 方程 (7, 5.,1) 中 所 得 到 的 剩余 向 
B20r=b- 4Ax， 则 -7 就 是 函数 F(xz) 在 x 处 的 梯度 疝 量 。 若 
х* Ж Р(х) 取 极 小 值 ， 即 F(x*) =min Е (х), Ш] 
gradF (x) |„#= Ax* -b= 0, 
БП x* 是 线 竹 方程 组 (7.5.1) 的 解 ， 
有 反之 ， 若 x# 是 线性 方程 给 (7.5.1) 的 解 ， 而 4 又 是 对 称 
EE, kA 


F(x) ~ F {x*) = -1 (Ах, х) — (b, x) —— 1 (Ax, х*) 
+ (b, x*) 
= 3 L(AX, x) 一 2 (b,x) + (AX*, x*)] 


— (Ax*—b, x*) 


— (Ax, ж) 一 2 (Ax*, x) + ( Ax*, x*) J 


А у— (A(x ~ x), х- х®*) 20, (7,5,4) 
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即 x* 是 P (x) 的 唯一 极 小 点 。 

定理 表明 ， 求 线性 方程 组 (7.5.。1) 的 解 的 问题 ， 可 以 转化 
成 求 函数 F(x) 的 极 小 点 。 求 F(x) 的 极 小 点 的 计算 过 程 ， 大 体 
可 以 归结 为 ， 从 任意 向 量 x 出 发 ， 沿 着 某 一 合适 的 方向 向 量 p 
进行 修改 , 从 而 得 到 一 个 新 的 近似 解 向 量 x ,使 得 F(x) > Ех), 
如 此 不 断 地 修改 下 去 ， 最 终 得 到 Е О) 的 极 小 点 x*。 从 计算 的 
过 程 可 以 看 出 ， 求 F(x) 的 极 小 点 x* 的 问题 ， 关 键 是 选择 修正 
方向 向 量 ， 
5,2 最速 下 降 法 

最 速 下 降 法 是 一 种 逐步 逼近 的 方法 ， 每 次 的 逼近 值 都 是 从 
F(x) 的 值 的 减 小 最 快 的 方向 上 选取 ， 由 此 而 命名 这 个 方法 。 
其 具体 迭代 公式 推导 如 下 ， 

首先 任 取 一 个 向 量 x'" 作 为 初始 向 量 ， 选 取 一 个 方向 po 使 
Ех) 的 值 沿 方向 Po 减 小 最 快 ， 从 (7. 5.3) 知道 

gradF(x'°) = Ах b= —r'”, 

ËB F(x) М Ш r” 方向 减 小 最 快 。 所 以 选取 p, = r°, 
HEr нар = х0 +aro 上 选取 一 点 xc 使 


Е(х1) = minF (x + art, 


设 
@(a) = F(x + аг‘) 
= š (Ах наг"), (ж наян °*)) 
- (b,x + artt’) 
= š а?( АР, KD) -a (Р, Fee) 
+ F (x), 
从 方程 
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аф (a е Кр 
Р О А =@(А!“°',г'%'; CF P= 0 
中 解 得 | 
a= (rt), РУСАТ, Р) = a0, 
2 d2 | е 
XAW- 2 = САДРО, r г*°'ус>ъ@, 所 以 
minF (x° ° + ат“? = F(x +a rO), 


于 是 解 的 第 一 次 近似 为 


[Хх PEx a, Ри: 


‘Qo= (rto). р УА", TH) (7. 5, 5) 
Ре? = Аж”... 


重复 上 述 过 程 ， WRP k оо 2 那 末 ， 从 
x'* 出 发 ， 则 使 F(x) 之 值 减 少 最 快 的 方向 为 re =b- Ax, 
同样 可 以 求 出 

minF (x' ë” +ar H?) = ржа? p a rey, 
其 中 

а= (Ө, Юу / САРО? rt), 


FERNY аша 


x k+1)— уа +a, ro, 


(PR? г?) (7. 5, 6) 
а= Arm риу r = b АК, 
而 且 满足 如 下 关系 式 : 
下 (X tD) — F(x) = Р(х? + art) — p (xP) 


; тад Ar ө?) СР? РА?) 


ЮЕ ра куа 
2 САРУ, Юу (CAP FP) 


= 一 нне оек (7,5,7) 
П 
Еск D) С р(х), | 
WAS RHH Y ИНЕ (к) рд К. 18 Ж, 是 否 有 
(хк) р(х"), 
还 需要 加 羽 证 明 。 为 此 先 证 明 下 列 31 理 。 
引 理 7.5.1 REX is À, 分 别 为 实 对 称 正定 阵 A 的 最 
大 与 最 小 特征 和 值 ， 则 不 等 式 : 


(8 + 1) À. 一 MAP 18) ' in 
FOX' `1) — F (x*) <( 2 Ta c) [F(%'*) —F(x*)] 
(7. 5. 8) 
成 立 ， | 
证 明 根据 (7.5. 人 和 Ax" = b 可 以 证 明 


F (x°) ~ F (x*) = - CACKA? = X), xA) 9) 


= (Ах b, ATILAX =b) ) 


T 5 (Ро ДА) О 2. (7,5,9) 
ХШ (7.5.7), 1748 
OREP L (rt. ATTE) (Ari РЫУ 
Р(х?) - БО At) (pal 62 4 
| (7.5.10) 
根据 线性 代数 的 知识 ， 当 4 ЭОХРИОЕЗЕ ЕН, А 的 特征 值 可 
以 排 成 : 0 <А, <А: <... < A, 而 且 一 定 存在 一 Bi Bu =s, 


В, 使 (7.5.10) 化 为 如 下 形式 ; 
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(CA 


(т, PEDE СУВ y2 
ДО А 
RD P 281 а, 


=<— “as na [2e (2: Aay A )] ` (7.5.11) 


ah = А А 1 
H À L= y, m b <у< /2 A. ° 因为 ?+ 1 Ey C [ 


2: 
[> manaa yusa J h 或 / -各 上 取得 ， 而 
e TT Tb 


ERMA EBS Jj, -各 ， 从 而 (7.5,11) 可 以 化 成 
(го, ATIT) (Ar, pt) А А, 
(r°, Fs)2 = БУ )? [ 5:5: (J4 


Àn | = th) i ө 
k 15 іа, (7.5.12) 


В (7.5.10) #107. 5.12) 1829] 
| р(х) ~ F (xk O) Se (F (х) -F(X*)), 
ма А, A. ld, 0 < e < 1, TE 
F (w'k+1)) — p (%%) = [F (x:k)) — F (%) J — [P(x 4) — F (wt s Ру] 
Ср) — F(X%)1 —e[F (xt – p)x*)1 
= (1—-е)[ Р(х?) — F(x*) J, (7.5.13) 
重复 使 用 不 等 式 〈7.5.13)， 最 后 可 得 
F(X A+ D) — F(x%) S< (1 —e)** ! [F (gt %)) ~ F (xe%5 ] 
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(1А ү роко рохе 
(: у) ПРО) Рн) 


АЕ zZ(k+1) 
= Ahe) [F(x 90) — F (x* ) J, 


À, + À, 
于 是 (7.5.8) 得 证 。 
定理 7.5.2 设 4 为 对 称 正定 阵 ， 则 
lht DO _ м || < 一 Àn Ai к] 21 
Ix x*|| < <(- i- ) Aa (7.5.14) 


Et I= pax) — F(x%), 
证 明 因为 (Ax, x) = BIA 21A B: = A, (X, x), 
所 以 
(x,x) <. (AX, х), 
41 


于 是 


H's+ Xx |2 二 (XED O кн _ хе, 


< (A: 0-0%), х0 де) 
1 


= “2 (р(х) — р(х*)), 
Ai 


再 根据 引 理 7.5.1 的 结果 ， 得 到 


' + 12 1 к: а 
| -x 了 и ) (F(x 0) ~ P(x*)), 
1 


ВП 


Е етее 
Ix tnt+1) L, х*| «(223 з) 21 
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因为 „>> о, ЦО yh < 1, F E W k-o9 B, 


xat xt, Веза Е СОНУ. 但 Ж, ДЖА 5А, 相 
ЗА, ВШ (А А.) (А tA 1, (7.5.14) HHB. 5 WE 
FERRIERE. ЗЯ Аа ЕКЕ 法 一 般 收敛 较 
慢 ， 特 别 对 于 病态 方程 组 更 是 如 此 。 因 此 ， 必 须 设 法 提高 最 速 
下 降 法 的 收敛 速度 . 
5.3 Ж ШЕ 

解 线性 方程 组 的 最 速 王 降 站 ， 由 于 它 具 有 局 部 性质 ， 即 在 
x 附近 函数 Р(х) 沿 方向 r 下 降 较 快 ， 但 是 从 总 体 来 说 并 不 如 
此 ， 软 此 收敛 速度 并 不 理想 ， 目 前 使 用 得 较 少 ， 下 面 我 们 将 选 
择 一 些 方向 ， 使 得 F (x) 9 着 这 些 方向 能 更 快 地 避 近 它 的 8 小 
值 。 由 于 选择 的 方向 具有 “Ж” р BU ЖУЗЕ 81 s 
Ж. 

Ер ЯЗ БЕЗЕТ A УГ. A5 AXTA -Hp 

( 正 交 》 的 概念 ， 
WA 为 对 称 正定 矩阵， x. у 是 实 的 列 向 量 ， 如 果 
(x, АЎ) = (Ах, У) = 0, (7,5, 15) 

ДАЕ ху EAH (ТЕЗУ) 的 。 

ЕЕЕ ЗЕЕ АЈ AA 

РЕНИ xX”, Тр АГЕ 

r” =b- Ax”, 
МаН рет ПИШЕ x U, JR 
pA ee ch 
а= O, PONP, AP), | 

再 从 w+ ARE p =r О КАЛЕ, 
的 近似 向 量 хб, HERP 与 po RIAH MA 
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В. = – (10, Ар°!)/(р'°, Ар"). 
于 是 x 可取 为 
X=X! +r,p':’, 
Ls (E, p/p O, Ap. 
ш хо CARE FARAR, TAA ж 
出 发 选取 方向 向 量 p=r B pu 1, ARER рыр? 
№ А — 95, В 
CAPE’, p 10) = (р, Ар) = 0, 
从 而 
有 Bi-I= 一 (人 Ap Ар”), (7.5.16) 
其 中 r= 了 一 Ax"'， 于 是 新 的 近似 解 向 量 x'“ ”可取 为 
Xi = EE S 
(ne A 
以 上 就 是 共 斩 斜 量 法 的 主要 计算 步 邓 ， 实 际 计算 中 ， 我 们 还 可 
以 将 上 面 的 公式 进行 简化 。 为 此 ， 肯 先 说 I a E Aro 
{p…} 之 闻 的 关系 和 构造 方法 。 因为 


ое тї) DG 
регио квр, (7,5.18) 


(7.5.17) 


ЯД щі = 0 Hj, 
ы ты 
p oO=r i +Bp "=r + ВР: 


当 i= 1 时 ， 


ds 
prr +8, p'u = мо +В +В, В, 


继续 上 述 推 导 可 得 
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PP .(7.5.19) 

рб =r +3? +B, Br H ++ + В,В Вол, 

| (7.5.20) 

\г'# = pit — 8р, š (7.5.21) 
有 了 关系 式 (7.5.19)，(7.5,.20)，(7.5。21) 后 ， 我 们 可 以 证 明 
如 让 定理 ， 


定理 7.5.5 HEMER OAR- DEXA Ж 组 ， 即 


(©, рус 0 G> j), (7. 5.22) 
ЭЖ Ж (реА МА Жа, BH 
(p'i), Ар) = 0 (Еј), (7.5.23) 


证 明 应 用 归纳 法 来 证 明 ， 
taba г?) = СЕ r” z Ap”) = (r°), pt 92) ЕЕ (t°, G Ap.) 


КИР ЗАД 
= (09:02) 2.2 ) (r, 


(PC9)， АР) АР) = 0, 


(р, Ар'??) = s (rO, AIE? + Bar’) = (ro, AF0) 
š 1) (2 
+ Во (r, Др) = (Ft, ДРО?) 一 = АР зу (re), Ар?) 
= (Р, А22) ГЕ (r°) Д) = 0. 
设 ? F) s, pik) EL Е 2; р‘ 7 р‘ x tety p'a) = Ё 两 
А — 91, {ЕЖЕ 
(па r?) = Ü (j= 0, 1, atig К), 
因为 
(pk + р, rii?) = (r a ApH, r?) 
z (rt, г'?›) -a,l Ap”, pii?) 
= (r rii?) -a,l ApH, р -Bi ipt) 
= (тоо, ri?) -a (APP, р‘) 
+a Bi- (Ар, р 0) = 0 
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所 以 (7.5.22) 成 立 。 再 证 

(ptt, Ар?) = 0 = 0, 1, +» k), 
因为 

(pte, Ар) = (pik+1) + В„р°?, Ap”) 

= (6+0, Ар?) +B, Ар), 
所 以 当 j = КЮ, 
(patu, Арі") = (patin Ар'*') 
(ar Ap Y) 
(р, Ар) 


. (pP, Ар) = 0, 
当 j<k ~ 1 时 ， 
(р‘** э, Ар'?Р) Q= (rikt) др?) 


= ASAP = м нб pu +у) 


1 
= = prato у р rt)] 
і 


= 0, 
从 而 证 明了 (7.5. 23). 
下 面 将 4; 和 8, 的 计算 公式 进行 简化 。 由 (7.5.20) 和 
(7。5, 22) 可 得 
(Р, р) = (Fi) yD Biar ETEO Los +B i. 8 B ri) 
= (r гу, 
于 是 ， 
а= (zt, pE, Ар) = (Р, ri)/(p' Ар), 
БЫ? r 0 BF, а >0, XH (7.5.18), (7.5.22), (7.5. 
23) 可 得 | 
apinaa mie 


= (к,г) /is 
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(PT Ap“ Tt) = (yi +B; ap b Apt: 
= e“ Ap'' у 


1 (но pay): 


= {г С aa 
а; 


= (FF /a 
Be WP Api „. чу. 
(р' R Ар) (Керч 
пу = 0 BJ, 6.2 20, MAMER MAE ЗАУРЕ, : 
算法 7.5.1 设 A 为 # 阶 对 称 正定 阵 ， b= (bys b,, +, 
ba) s eps ж) (м, ғ) 8 (Ар, 了) 的 允许 误差 ， 引 人 比例 因子 d 以 防 
发 生 溢 出 ， 取 初始 向 量 为 0 和 限定 迭代 次 数 不 超 过 3n。 
1) d= 2 二 Max(1b:|)， 其 中 6 为 整数 ， 
2) p=r=b/d, 
3) Wk=0, l, =, 3m, 
3.1) 9 + (r, Р) / (AP, р). 
3.25 ї=1,‚ 2, е, п, 
Xí*-X; + @р;› 


=; - q 2) G pi (F,r) <ерв 转 6), 
J=] 5 ， 


3,3) e<—(r,r)/(r,r), rer, 

3.4) per +ер, САр,р)=ер5 H 6), 

3.5) NEXT k, f 
4) а <2°--тах(1р‚|). 


5) р«-р/ й, #< т/а, d— dd 53), 
6) 输出 结果 x АПК, 
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例 7.5.1 МЭО 
人 +X, = 5; 
X, + 2X;, = 5, 


жал рр G] 
ц 21 5 了 
取 x»=[°], 
| 0 
: 5 
1 计算 r=b-Ax"=p'"=| |, 
20 ПА! о - 
Ар = | |. (р, Ap") = 175, 
15 
(r,r) = 50, а„=?2/7, 
2[5 
(1) — ny (0›_ — 
但 x = x +a p -了 |. 


2) кє] 22338 
| ы Рт, 7 1 $: 9° РА 


БЕ | рр 30 
р‘ = г? + Вр‘ = al |， 


40 
„ыз рор 50 
сїз Т. tiy atiy 7 7.. 
Ap = | 50 |. т | fr ) = 49 . 
_ 3500 _ T 
P. Ap) =. 492° ‚= 197° 
得 xt = x +a p= [.]- = 
这 时 | "®=[°], 
0 


-FERIER MARNE RIE, B838 i 的 增 
К НУН НИН, ПОН АЯ RA 
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时， 至 多 到 + 步 使 能 得 到 方程 组 的 精确 解 。 
定理 7.5.4 Наин 阶 线性 方程 组 ， 最 多 计 
算 n 步 便 可 得 到 方程 组 (7. 5.1》〉 的 精确 解 。 
证 明 根据 定理 7.5.3 可 知 ， 如 果 n+1 КФ, 
六 ，…，7'" 均 不 为 零 ， 那 末 这 些 向 量 必 线 性 无 关 ， 从 而 与 线 
ЖЖ ТАТЕ ЕЖЕЛИ, WE о, s, rt hz 
УВК, Hre =b- Ax'= 0, 8 x = x*, 
定理 7.5.5 Ис I< kh, хх WOO USM 
x*, В 
РАР xl. 
WA 如 果 能 证 明 
上 (7.5.24) 
那 未 ， 用 不 等 式 进行 递 推 ， 便 能 得 到 定理 ?. 5. 5 的 结论 . 
ВЈ хаж q a,p'i, Вр 
|a) е = (джа, A Dx пр) 
= аксе — 20, Ср, жка ж казр, рю) , 
(7, 5. 25) 
由 于 22220, (р, р!) >20, ТЫЯ ЕН (ре, At O- хе) 
<0， 定 理 的 结论 就 成 立 了 。 因 为 
xt RAD Pax Og pH ap = .. 
=X tap i +a р e, taph’, 
{ЕШ 7.5.4, 必 有 X x (т=п), Т] x° = x* = x° + 
ар + на, 1р", В ksm- R, (7,5,24) 显然 
成 立 。 于 是 只 需 讨论 k<m - 1 的 情况 ， 此 时 ， 由 
х0 иж ара O -apa ph – 6-а, 1р0, 
И PY, хаф 一 -ap P, рё?!) —a,, (p, ра?) 


-e -an PP p), 
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XH a, MEADE 


Ср, р) = ео || рату У а/е) >0, 
(7,5,26) 
从 而 (р, x+ -x*) 和 0， 即 本 定理 成 立 。 

共 斩 斜 量 法 虽然 水 质 上 是 一 种 直接 法 ， 在 有 限 步 内 可 以 得 
.到 方程 组 的 精确 解 。 可 是 ， 在 实际 计算 中 由 于 存在 含 人 误差 ， 
使 剩余 向 量 不 能 精确 满足 正 交 关系 ， 所 以 可 能 有 r'” 关 0 ， 而 
且 当 系数 矩阵 病态 时 ，r '” 仿 离 零 的 程度 也 更 历 害 。 不 过 ， 由 
于 共 罗 斜 量 法 的 计算 公式 具有 迭 代 法 的 特点 ， 如 果 r '"’ 子 0， 
还 可 以 用 此 法 继续 计算 下 去 ， 只 要 res #0, Р(х) 的 值 总 会 
减少 ， 直 到 由 于 伟人 误差 的 影响 使 近似 解 不 能 再 改进 为 止 。 因 
此 ， 最 后 总 可 以 得 到 更 好 一 些 的 近似 解 。 

本 章 讨论 了 解 线性 方程 给 的 线性 与 非 线 性 选 代 靶 ， 重 点 介 
Т SOR 法 ，Chebyshev ЕЖ КНЕ, Е У 
аини, 

Jacobi 法 与 Gauss-Siedel Аат S g£, 不 过 
MARERA, EEA. rate i, P 用 Che- 
byshev 加 速 ,从 而 得 到 .Chebyshev 半 和 迭代 法 。 当 厌 和 迭代 矩阵 了 
的 特征 值 全 部 是 实数 时 ，Chebyshev 加 速 是 很 有 效 的 。 但 是 当 
原 方程 的 系数 矩阵 A 是 具有 相 容 次 序 的 对 称 正定 阵 时 ，SOR 方 
法 的 收敛 速度 比 简 单 迄 代 法 的 Chebyshev ШЕ Н р 倍 。 
即使 矩阵 不 具有 相 容 次 诊 ， 在 某 些 条 件 下 也 还 比 Jacobi 方法 或 
Gauss-Siedel 方 法 决 一 个 数量 级 ， 因 此 ， 在 实用 中 常常 使 用 
SOR 方法 ， 其 松弛 因子 的 选择 往往 依赖 于 实际 经 验 。 

当 系数 矩阵 A 是 对 称 正定 隆 时 ， 共 轿 斜 量 法 是 一 种 较 好 的 
方法 。 它 不 需要 估计 参数 ， 但 是 存在 着 计算 过 程 中 侈 人 误差 比 
较 敏 感 的 缺点 。 近 年 来 提出 的 “不 完全 分 解 预 处 理 共 元 斜 量 
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E” 弥补 了 这 方面 的 缺点 。 这 种 方法 虽然 在 理论 上 还 不 成 熟 ， 
但 是 在 某 些 实际 应 用 中 ， 却 取 街 了 惊人 的 效果 ， 受 到 了 国内 外 
的 普遍 重视 。 

近年 来 ， 对 迭代 法 还 常常 用 于 处 理 靶 的 技巧 来 城 小 原 和 矩阵 
的 条 件数 区 加 快 迁 代 法 的 收敛 速度 。 尤 其 对 病态 方程 组 效果 特 
别 显著 。 另 外 ， 还 发 展 了 不 少 对 其 些 具 体 问 题 的 解决 特别 有 效 
的 选 代 靶 ， 如 *“ 强 隐 式 迭代 益 ” 等 ， 最 后 还 应 指出 ， 选 代 法 的 使 
用 与 具体 问题 的 特点 有 着 很 密切 的 联系 。 在 各 种 实际 问题 中 使 
用 和 迭代 法 的 经 验 与 针对 重 题 进行 详细 讨论 是 很 重要 的 。 


жж 3 B 
7.1 设 线性 方程 组 4x =b, А 2 
939 1 2, 1 2 2: 
1). o ° 1} з р. ORO 
1 0 1) 2 2 | 
考 用 Jacobi 选 代 法 ，QGauss-Siedel 选 代 法 求解 ， 是 再 收敛 ? ЖИГИ Ж 
方程 组 的 解 ， 
7.2 设 Ax = b, 其 中 AE R”, 试 证 有 
max Jci. <1 
ЕЧ 
是 Jacobi 迭代 法 收 仇 的 充分 条 件 。 
7.3 用 逐次 超 松 闻 选 代 法 解 方程 组 (Ho = 0,9) 
[ 5xX +2x2+xX3= 一 12， 


| 一 XIT4xa+2x3=20， 

\ 2х,—-3х›+10Х,=3 
淮 确 到 小 数 点 后 4 位 ， 
1.4 证 明定 理 7. 2.3 香 定理 7.2,.5 的 充分 性 。 . 
7.5 Аш п 阶 矩 阵 4 不 可 约 的 充 要 条 件 是 
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з= ] 或 者 对 任意 两 个 不 同 的 整数 i, J, s 1<J<n, Wi 
0;; 关 0 RAEE, ір, ov, і, ME 
Gii, Ait li EOL 
7.6 证 明 lim 118") = SB, | 
7.7 {Ң# АНЕЛ, ЗАСВ ИЯ T. TE 的 SOR 方法 收 
网 下 列 条 和 作 至 少 -- 个 成 立 
D 对 某 一 >0， 对 足够 大 的 到 有 
EO EI-E 1=1,2,., 
2) HEBBARI i, Soc 和 级 数 


У ®:(2—@) 


эк. 
7.8 4 Q= BF, W (7.3.12) НЕЕ, ПЕНН {ЧЕ Wr $. 
7.9 设 序 列 {х.}=5{(—-1)'*+%}, SFBBPEZU {ху} 为 Cesaro 可 求 和 。 问 是 


BAE Plam n= 0,1,2.…， 使 作成 的 新 序列 y= акк RR 
k = 


7.10 - 设 方程 组 x= Bx + 入 与 Ax= 有 (其 中 人 为 非 奇异 矩阵 ) ФЫЙ, НОН 
E B 的 特征 值 上 满足 ; —2<Н<50,9, 1. SHES, ER RHEE R ARIE 
xin+l) = Bx +g, 
ета ес А 
7.11 对 习题 7.3 中 的 方程 组 分 别 和 用 基于 Jacobi 和 Gauss-Siede1 选 代 
法 的 Chebyshev ARHI, 
7.12 НҢ (7.5.20 У. 
7.13 (ПЛАНТ е H 
4x; -X2 + 2х3 = 12, 
| ~X; + 5X2 + 3х: = 10, 
2х1 + 3х9 + 6х: = 18, 
7.14 设 Ax=b НТА ЕТИ, ХЕ ATA ЕЕЕ, HEE 
ИШЕ ЕКЕ АТАх = АТЫ Ш, 
7.15 设 和 为 对 称 正定 阵 , ЖИЕ Ах = b 5 #hAl би $L: А КӘ, 
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ГЇ! 
[2] 


[3] 


C4] 


[5] 
61 


xC 0) А, ax = Аг, = 0, 
KAHI = їй) Дк, 


Ax; = > (зе Ах, 1), 


(баз, Аек) 
= = P... е, e= 0 
1 (fk), reh?) им 


(eh, г! hD) 
TDD) 94-19 


rito eO Ari, 


Ëy = 


Ағ =. Ас +е Леру). 


k= 0, 1,2,"-". 


э y + 
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第 八 章 ” 非 线性 方程 组 的 


牛顿 迭代 解法 
п 引言 


近年 来 ， 许 多 应 用 领域 和 数值 分 析 本 身 都 提出 了 多 个 实 侣 

其 的 非 线性 方程 组 
fi (ÈE mE)=0  (ї=},+е,п) (8.1.1) 

ЖКП. ВИН ЗО RETTA. 

非 线性 方程 组 (08.1.1) 也 可 用 疝 晤 形式 表示 ; 

Е (х) = 0 

ІЕЕ = (fisfas 66, ],)7, x= (Eis Ens ++, En) e ЈЕВР (x) 可 
МЮ ЛАКЕ pc R" 至 R" уң], 常 记 作 Р. pc R"—R", 
如 果 fis fastes f, Бре ЕРЕ И, Д] (8,1,1) ЁП Ж 个 变量 
的 线性 方程 组 :如 果 #= 1， 则 (8,1,1) 即 为 单 变 量 的 非 线性 方 
程 。 这 两 个 特例 在 数值 分 析 教 程 中 均 作 了 了 较 详 细 的 研究 。 对 于 
一 般 的 非 线 些 方程 组 的 数值 求解 ， 很 自然 地 会 面临 两 个 问题 ， 

(1) 方程 组 (8.1.1) 的 可 解 性 分 析 # 

(2) 寻找 有 效 的 数值 方法 来 求解 (8.1.1). 

MRA AHER, TAERAA RRA RRA 
和 较 少 的 运算 量 。 第 一 个 问题 已 远 远 超 出 本 教程 的 范围 ， 因 为 
它 属 于 非 线性 泛 洋 分 析 的 范 叶 。 所 以 ， 以 下 我 们 均 假 定 方程 组 
(8.1.1》 在 在 解 。 今 后 的 任务 仅 在 于 构造 各 种 兴 代 算法 ， 以 求 
得 (8.1,1》 的 近似 解 ， 


对 于 许多 迭代 算法 常 成 六 以 下 定理 ， 和 如果 Xx* 为 (8,1.1) 
在 区 域 了 中 的 一 个 解 ， 而 x, 为 一 个 充分 接近 x* E 卫 的 初始 近 
RA M Xo 出 发 产生 的 迭代 序列 ‘xi} 恒 有 定义 且 收 伍 于 x* 
这 种 类 型 的 定理 常 称 为 局 部 收 伊 定理， 固然 ,有 极 个 别 的 情 
Е, ЖКА Ух, AT x* 与 初始 近似 解 x, 的 选取 无 关 ， 这 
种 收 和 化 性 质 常 称 为 粘体 收 纹 性 。 对 于 某 六 代 算 污 ， 若 nn 维 空间 
中 存在 球 S(x*，r) 一 ， 从 该 球 中 任何 一 点 出 发 ， 由 此 生成 的 
(x,) 必 收 敛 于 x*， 则 球 S 就 称 为 该 迭代 算法 的 局 部 收 S 域 ， 
非 线 性 方程 组 的 迭代 解法 的 基本 思想 由 以 下 三 部 分 组 成 ; 

(1》 由 一 个 极 差 的 初始 估 猜 x, 出发 ， 设 法 进入 局 部 收敛 
区 域 。 在 实际 问题 中 ， 有 了 时 事先 对 所 求 的 解 已 经 有 了 一 个 较 好 
的 估计 ， 则 这 一 步 就 可 以 免 去 。 

(2) MARKAK S 中 一 个 初始 近似 解 x, IB 发 ,通过 
加 速 收敛 的 迭代 算法 ， 求 出 足够 精确 的 近似 解 。 以 后 着 重 介 绍 
的 就 是 加 速 收 和 敛 的 局 部 技巧 ， 或 者 说 局 部 方法 。 

(3) 继续 求 方程 组 的 其 余 解 。 


52 ” 非 线 性 方程 组 的 牛顿 迭代 法 


正如 一 维 情形 那样 , 牛顿 法 也 是 求解 非 线性 方程 组 (8.1.1) 
的 一 个 基本 算法 .许多 其 它 的 选 代 算法 都 是 在 它 的 基础 上 作 各 
种 修改 得 到 和 的。 因此， 无 论 在 实践 和 理论 方面 它 都 具有 重要 意 
义 . 

一 维 牛 里 法 的 几何 意义 是 ， 在 模 维 标 20 x, 的 点 了 Ps B| BJ 
线 ， 于 是 在 Р, 点 近 傍 以 该 切线 近似 替代 曲线 y=f(x) 。 然 后 ， 
将 该 切线 与 x 轴 的 交点 的 模 华 标 x..， 作为 根 x* 的 新 近似值 . 
如 此 不 断送 代 ， 直 至 得 到 满意 的 近似 值 为 止 ,现在 ,我 们 就 来 仿 
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照 一 维 情形 ， 牌 造 出 非 线性 方程 组 对 应 的 牛顿 迭代 公式 。 


[8,1 ЛЕЙН Ж X 


X DERN, {ХАЛ TOE JD ЖШН 
ho &0 = 0, 
Jao £2)=0 | 
Fre. BEENA (8.2.1) ех ВВА, fa 7. Е 
2 НЕЕ ИЧ Sar, 5ш (аб, EFD 为 上 述 邻 域内 的 
ліз ИЕР RKR 


(8.2.1) 


h Бола з + бр a ыз. 
| l; (Eis б) тт fa Es 27) 十 a a Ph (E-E) 
\ н К З ©; (5; £), сл) 


Ei RAAE EAR fi £) M felo $), Р» ҶЕ 
线性 方程 组 (8.2.1》 即 以 线性 方程 组 
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‘Of | AET + д. Аё = — ],(х„), 

921 EEFT] JË: х= xk 

д], әр (8.2.3) 
tA =>. tA) 一 _ 

和 | 


ШИК, Я Д 2-0, ДЕ =, E, x = (E, 
БИ Е АНЕ 


“ 61, ofl | 
д&\ 0& 
Ў ai fa (8,2, 4) 
ÊL ay 
为 非 异 ， 则 可 解 得 
/ д1 д1 1 
Aš Ж dË дё, | | =, 
ЕТО ass е Veen 


~ O61 Бу. ¿zs 
AERE (8.2.4) ЖИЮ E A Р(х) 的 Jacobi Ж E£, 10 # 
Ё! (х), ЗЕПП, IEP =E ДЕЦ, ДОО EGA) ДЕ, Д] 
(8.2.5) ај Е 
AX, = —Ё' (х,) 1F (x.) 

或 

Xati =X, Ё (x) 1F(x,), (8.2. 6) 
公式 (8.2.6) 称 为 求解 非 线性 方程 组 〈8,2.1) 的 牛顿 迭代 公 
式 ， 而 线性 方程 组 (8,2.3》 则 称 为 牛顿 方程 组 。 

РЕА р Р(х) 自始至终 作 如 下 假设 ， 

假设 1. 

(1) WERA F (x) 在 开 的 心 集 D* руу, RED 
HER Eo Eons EJ) Gsl a n) 连续 且 有 连续 的 一 Br 
ЖЕ ОЁ Жж. FLRS p am ЕЮ, ЫБА 
再 说 明 ) 。 
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(2) 了 内 存在 点 x*,， fE F(xw%) < 0 B. F' (х*®) 为 非 异 ， 
F’ (x) 25 Jacobi р 
(Әһ Әһ  дһ\ 


| De дё IEn 
| дз of ‚ SP 
dÉ; 98, дё, , (8,2,7) 


Әһ Әһ . Әһ. 
N OE! д&› QË, ! 

综 上 记述 ， 牛 顿 法 的 基本 思想 是 ， 将 非 线性 方程 组 逐次 线 
性 化 ， 从 而 形成 迁 代 算法 。 具 体 地 说 ， 设 x, 为 x* 的 第 k 次 近 
l, Æ x, ЕН, п Е 

L, (x) = Р(х) + Ё (x) (x —x,) (8,2,8) 
ПАЈЕ Р(х) 的 一 个 较 好 的 通 近 ， 则 由 线性 方程 组 Д, (x) 
=0 求 得 的 解 x | 必然 是 x# 更 好 的 近似 解 。 

牛顿 靶 的 计算 步骤 可 总 结 成 如 下 算法 。 
| 算法 8.2.1 Ё: К"—>К", хо 为 x* 的 初始 ЇЙ, < il 

都 满足 定理 8. 4.1 或 定理 8.4. 2802. КЖ WS E xE RS ЈАТ 

1) к= 0, 1,-, тот 为 允许 的 最 大 迭代 次 数 )， 

LD HRF), WR xx 满足 精度 要 求 ， 则 转 3). 

1.2) ТЖ F’ (x). 

1.3》 求 解 线性 方程 组 FF’ (x) Ax, = — Р(х), BL x... 
=X, + ДХ, 

2) NEXT k. 

3) H x*=X sje 

4) END, 

牛顿 法 的 特点 是 ， 把 向 量 函 数 F(x) 看 成 一 个 整体 ， 通 过 
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线性 化 ， 从 而 形成 选 代 算 法 ， 这 种 方法 的 优点 是 ， 便 于 收 伍 性 
分 析 ， 利 于 和 欠 代 次 式 的 修正 ， 人 也 这 种 方法 并 未 充分 利用 函数 的 
具体 结 松 。 对 于 一 个 非 线 性 向 量 图 数 F(x) ， 其 非 线性 程度 在 
KATERA У, (х) (i= 1, m W 上 分 布 可 能 是 不 均衡 的 。 也 
就 是 说 ， 有 的 分 旦 非 线性 程度 商 ! 有 的 则 接近 线性 函数 ， 甚 至 
有 的 完全 是 线 竹 国 数 .在 这 种 情 癌 下 ， 把 所 有 分 量 (х) 采取 
完全 相 后 的 数值 处 理 ， иам 于 
是 人 们 设想 ， 采 取 对 fi(i=1,，…，n) 逐个 线 忻 化 结合 代 人 站 
以 形成 迭代 算法 的 途径 ， 这 也 就 紧 Brown 算法 的 基本 思想 . 下 
HARRE Brown 方法 的 迭代 步 又 。 

设 x, 为 x* JJ Er k 次 近似， 首先 将 fi fE x, 近 傍 线性 
化 ， 当 x 充分 接近 x* 时 ， 即 有 

(х„) тй 


fix) Z J y (x) + > 91. ОЁ; 
令 上 式 为 零 ， 则 可 解 出 一 个 变量 ， 设 为 扣 。 则 
ë, = EP- (hg) [5 У! эп дю -(&|—&{#) 


+1,(х„)}. (8,2,9) 
ЕЕЕ Ду, te, Enoi DRRR. БУ 


› { р. 
І. (Еу бау s Ên) = £h) — ee. 


P аһу. (2; -E +f o) J. (8,2,10) 
1 


ВРИЕ И 把 L, (É, £, 2,1) (Е 
ШР К Е, 的 近似 ， 把 它 代 入 1, (к), ООВ f, (x) 就 变 成 一 个 
# 一 1 ERS TAM, BU 

gz (0) ==], (2, Ёо s, Eais ГЕ En-1)) (8.2.11) 
对 g, (x)〉 作 类 似 于 f(x》 的 处 理 ， 即 能 解 得 
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有 
DEn-l j= 1 


+8›(х„)}, (8.2.12) 
注意 上 式 中 X= (EE, 66, £ 。 上 式 右 端 为 恋 量 Eres 
En-a Ауе: Ва, 记 作 工 ,- (y =»; Gn-s)。 

波导 这 样 的 步 肢 ， 依 次 处 理 Р(х) 的 各 个 分 量 函 数 。 最 后 
考虑 go(x) ， 此 时 ga(x》 蕊 简化 为 只 含 & 的 单 变量 函数 。 通 过 
线性 化 ， 便 能 解 得 


= ё — жү, AERP (8.2.13) 


于 是 即 求 得 了 21 BE k+ 1 MEWE. BE Hi AAH RH KA 
Los Ілу" L, 8-1. RIA RER BS х1. 3Hl 
举例 说 明 以 上 迭代 过 程 。 
设 非 线性 方程 组 为 
[fi =b- 26, +1=0, 
'f: (x) = +58, +1= 0, 
fœ 21 +i -é -2= 0; 
初始 近似 解 为 ze= (2, 0, 2)", 
根据 前 述 步 骤 ， 首 先 在 点 x 近 傍 用 线性 函数 
fix) + (É, — ДОВ) (Et) —2) + (É, – ЕТ) ER) 
来 近似 替代 访 (x) 。 令 上 式 为 零 ， 即 可 解 出 变量 
é&=8 — СЕА) Г (&У'—2)50+1], 
定义 | 
L (Ers &) = Д (g) 1[ CE — 2)& + 11, 
下 一 步 即 可 利用 Lilo ED 消去 f(x》 їн А, CRE 
本 问题 中 ，f : (х) PERS 6), ， 从 而 定义 新 函数 
g2 (Éis Ér) 5 +5 +1, 
Bz (61, &;) fE Е, EE) 处 的 线性 近似 表达 式 为 
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g | (Е, Д) + (21-60) +502, - 62), 
令 上 式 为 零 ， 即 可 解 出 变量 


É; = - T+), 
定义 
L, G@)=- (1 +Š) 


利用 L (ëo &,) MLD ЖЖ Уз (х) 中 的 变量 $2 5, АПШ 
у: т 


BED =E +5 +5) 


— (ЕА (Еф?) ![ (E? 一 2)E + 11) — 2 
gB (8) {лд S 近 傍 用 线性 函数 


сдә) 
вос) + (FREN + r+) EE) 


近似 替代 。 令 上 式 为 零 ， 即 可 解 得 
Ebla 500 一 
Em tg + {EP EMEP -DEP +11-2 


EW —2 2 й 
MZ pO R) L Š 2. 
T P gur СЫ 


ЖИЫ Е.А хо 出 发 逐次 先 代 ， 可 得 到 如 下 结果 : 
в | 5 "| š lalese ёз 


0 一 2。 000000 0. 000000 ; 2.000000 
1 | -2.112745 | 0.222549 | 2,500000 
2 — 2. 103978 0. 220796 | 2.475893 
3 | —2,103937 0.220787 : 2.475299 
4 | -2.103937 | 0.220787 | 2.475299 


综 上 所 述 ，Brown 算法 是 对 非 线性 方程 组 逐个 线性 化 ， 逐 
个 消去 变量 以 及 向 后 回 代 相 结合 的 选 代 过 程 ， 该 算法 在 85 还 
将 详细 讨论 。 

在 结束 本 节 之 前 ， 还 有 一 个 问题 须 作 出 回答 。 前 面 我 们 将 
向 量 函数 F О) 的 Jacobi Е Їп F (x》 来 表示 ， 那 
Ж, Р(х) 的 Jacobi 算 阵 究竟 如 何 体现 出 “导数 ”的 意义 呢 ? 

回想 单 变量 实 值 函数 在 点 x 处 导数 的 概念 。 如 果 存 在 一 个 
实数 & —]' (x), EH 


(5) С) -f(x) -аһ]=о 


КА, Ја Ву РАЎ f(x) 在 点 * 处 的 导数 。 这 个 定义 可 以 自 
ЖИНГ л Е. 

定义 8.2.1 设 F DC R'-=R", х 为 卫 的 内 点 。 若 存在 
ACR” "使 对 所 有 jhCER 有 


" 1 f : 
lim( hii) CF (x +В) -Е(х)—АВ|]=0 8.2.14) 


或 
F (x + h) = Ех) + Ah -+ o (||h||) (8.2.15) 


Аз, ИД К F (x) ŒA x Э Fréchet 可 微 (或 F- 可 微 )， 

据 范 数 等 价 定 埋 夭 ，(8.2,.14) 中 的 极限 与 R” 上 所 取 的 范 
WIER. А, ТЕЖИК ЕХ F, ШЖ F (x) 在 x 处 为 
F- 可 微 ， 由 对 任何 范 数 而 言 ，F (x》 在 x 处 仍 为 F- 可 微 。 不 
难 证 明 : 使 〈8. 2. 14) 成 立 的 矩阵 4 至 多 只 有 一 个 。 

现 设法 用 Е 的 分 量 函 数 fn у L, BJ ЖОЖ ЗЕЛ Sa PE А, 
Ж А = (а, у), В ЕИ (8.2.1 对 任何 趋 于 零 的 向 量 
hE R" BRAS, ЩН а= те, (0220), Д] 

гт 1) агер ~ f (х) — ta; ]J= 0 
(i= 1 m), 
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HBE, fiG=1, m) 在 x 处 的 偏 导数 存在 ， 故 上 式 意 味 闭 
а; | = ZE G=], TEs т; j= 1, ыы, п), 


由 此 可 知 ， 在 极限 式 (8.2,14) 成 立 的 前 担 下 ，F(x) 的 Jacobi 
EME (8.2,14) 式 中 的 4 和 矩阵。 因此 ， 将 乒 (x) 的 Jacobi 
矩阵 记 为 F (x) 是 极 自然 的 。 当 然 ， 反 过 来 Jacobi 矩阵 的 存 
在 并 不 能 保证 Р(х) 5 F-J. Д, "4 m=1 时， 即 Р(х) 
为 下 元 函数 时 ， 假 定 在 点 x 它 的 所 有 售 导 数 均 存在 ， 那 未 它 的 
Jacobi # БЕП ф 

oF ОР oF 


Е: (x) = JE? РЕ дё; 3 


[E Р(х) {Ех GRAT BAE Р(х) фе х Ж F- 
п/о, 
定义 8.2.2 j Е. рск", WE F EDINA 29 F- 
可 微 ， 划 把 使 (8.2.14) {Л АСЕ" 记 为 F(x)， 即 
Әһ Oh „өйү? 
OE! ĝa aŠ, 
| ðf: ðf: 19}. 
F' (х) = 98. 06, IEn 1, 7 (8.2.17) 


(8.2.16) 


Dj Зі, Жез Ofm 
. 9Š д&2 дё, / 


并 称 它 为 F(x) 在 x 处 的 F- 导数 ， 

至 此 我 们 即 可 明了 : ЮЖ Р(х) 满足 假设 1 (а) 实际 上 就 
是 指 F (x) EDAF- TW. EXE, WEAR J (o 66, E) 
G=l…，m) 在 也 内 连续 且 有 连续 的 一 阶 含 导 数 ， 则 对 一 HJ 
i 成 立 


иш. (+ h) ~ Fix) -VAR _ 0, (8,2,18) 
А-0 В| 
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因此 
Е(х+ћ) -F(x) 一 天 (x)h 


lim -- : мем ати ӘЛ = 0, 


0 |\В|| 
m 8.2.1) RÆNT 
lim (тат IF cx +h) F(x) — F: (х)В|| = 0。 


ШЫП F GO) ЕЕЕ. ищ. 
例 8.2.1 用 牛头 法 求 非 线 性 方程 组 
| fi(£1, a) = 461 ti +256, -5,-2= 0, 
lfa (El, Êr) =24} +3408, +51-3= 0, 
的 解 ， Ji R НХ x, = (0.4, 0,9)7, 
据 算法 8. 2. 1 首先 计算 F (x): 
f 080), EP = —0.73, 
| f: ET’, E) = ~ 0.79, 
后 计算 F) (xi)， 为 此 求 出 
J, = 8E: +262, ff. = 281+262 - 1, 
fn. = 46,+35,, Fu = 36  +25,. 
于 是 | 
j 5.0 1.6) 
F: жые . 
„4,4 3.0. 
因此 线性 方程 组 Ё’ (xo) Axo = ~ F (x) 为 
5, ОЛЕ +1, GAEL? 50.739 
Д. ЗАД +3, 0AP = 0.79, 
8 {8 дх= (0.114, 0.100), E X= x + Awa = ( 


(8.2.19) 


0.514, 


1,000)7。 重 复 以 上 计算 , #8 F (x) = (0.084784, 0.070392)”, 


їй 
“6,112 2,028 


F: (x) =] А 
5,056. 3,542, 


e 200 。 


再 解 线性 方程 组 
6.11242' +2. 028A% = —0,084784, 
5, 056AES + 3, BAZAS = — (0, 070392, 
得 Ах,= ( – 0.013826, -0,000138 )7, х, = х + Ax, = 
(0.500174, 0. 999862), 进而 F (x, = (0. 000768,0.000387)'. 
在 点 xx 处 的 Jacobi 证 阵 为 
| 6.00116 2,000072\ 


\ 5.000282 3.500246 了 

解 线性 方程 组 | 

9" 001164612' +2,000072AE2 = ~ 0.000788, 

.5.000282AE2 + 3, 5002464 = – 0, 000387, 
{5 Ах, = ( ~ 0.000174, 0, 000138 )7, Xs = x, + Дх, = 
(0.500000, 1.000000)", RE, RIEN Р(х) = 0。 也 就 是 
= ИН, RRETARA. МАА, RE 
一 个 特例 ， 一 裔 情形 只 能 得 到 近似 解 。 但 从 这 个 例子 可 以 看 
出 ， 午 顿 法 的 收 俩 速度 是 比较 快 的 。 在 84， 我 们 还 将 具体 分 析 
牛顿 靶 的 收 伍 性 。 


553 和 迭代 过 程 的 收敛 率 


本 池 的 主要 任务 是 对 迭代 序列 (x, CR 收 钱 速度 的 度量 
方法 予以 定义 。 
定义 8.3,1 j# (x, R" 是 由 某 迭 代 算 荡 所 生成 ， 它 收 
Р (8.1.1) 的 解 x*。 若 对 某 向 量 范 数 上" 上 |， 存 在 一 与 无 
关 的 4E (0, D AREK k a, 4 kk, 时 有 
ар x*|<ql|x, | (8.3.1) 
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成 立 ， 则 称 先 代 序 列 {x 四 至 少 是 线性 收 化 的 。 
以 上 定义 意味 着 , 当 k>k 时 , 每 经 一 次 迭代， 误差 至 少 以 
因子 4 缩小 。 一 个 实用 的 迭代 算 靶 至 少 应 具有 线性 收敛 速度 。 
一 个 新 的 、 有 价值 的 局 部 加 速 方法 ， 它 应 该 具有 下 述 超 线 
性 收 敏 性 。 忆 后 我 们 介绍 的 大 多 数 算法 ， 在 一 定 条 件 下 均 具 有 
起 线性 收敛 的 性 质 . 
定义 8.3,2 {L ACR" ЖЕКЕЛЕНГЕН, сий F 
(8.1.1) 的 解 x*。 若 对 某 种 向 量 范 数 | 1， 存 在 一 收敛 于 零 
的 实数 列 {4,}， 使 对 任何 k 成 立 
|х. -х*|<а,|х„-х*|, | (8.3.2) 
ДКА НЕБАК, Ба ЕН SERS В МЕНГО, АПЕР 
Ti Я АН ЖЕ kE r ax, 
тай E m KATETE Si Д жон кек Н ехе, Д 
(x AE ANERE | 
Итә, у —х®|/[жх,—х*| = 0, (8.3.3) 


A FERREE SHS Ио ЯЕ, РЫ 
ER ЕЕ НЯ DEBU Sot EA АЗ. 

定理 8,3,1 REFERERAT xy, 当 上 之 ko Н.х, 
x* Bj, Д] 


\х,,,-х„] 
lim— Zk+ =], 
ата [xx] 


但 一 般 而 言 ， 反 之 未 必 成 立 。 
й БОЕ k>k Er 


lesi- Xl 1, -х*| | |х,,,-х с* ||. 


ае, — ж | ох, ~ х*|| | РЕ чш x*| 


(8,3,4) 


BD 
r 301 。 


I i ' | *| 
а: оа 1 < jx -x*] 

据 (8.3.3) 即 可 推 知 (8.3.4) 成 立 。 

上 述 定理 的 逆 命 题 未 必 成 立 ， 我 们 给 出 一 个 反例 。 
例 8,3.1 设 序列 {Xi} 定义 为 
ЕЕ: 
ы (ф=1, 2, 68) 

( Х,;=2Х,;.,, 

Хі х*= 0, ЖКС x*， 但 据 序 区 定义 ， 亚 然 它 并 

不 超 线 性 收 全 于 x*、 然 而 


E Ae ` 1 (k=2i- 1, i>1), 
Ад 1 k. _ 


a р qD =н, >). 
于 是 ， 对 该 序列 而 言 ，(8,3.4) 是 成 立 的 。 

定理 8. 3. 1 告诉 我 们 ， 如 果 已 知 !{xd 超 线性 收 伍 于 x， 那 
末 就 可 利用 |x;,1 1 来 估计 误差 |х, – 1. фр. БГ н 


如 下 迭代 收 伍 准则 : 事先 指定 正 小 数 1， 如 果 有 


| а. 1115,11 (8.3.5) 
或 | 
ИСЛЕ (8.3.6) 
R, PKA КЖК. AER ULK КИСИДЕ ЯП 
ПЕ (х„)!|<є, (8,3,7) 


联 用 ， 以 防止 出 现 内 顾 一 头 的 偏向 ， 这 里 е, 也 为 事先 指定 的 
正 小 数 〈 当 然 还 可 以 采取 其 它 措 谍 )。 这 洋 做 的 目的 E EX 
际 计算 时 ，{x\} 并 不 一 定 超 线 生 收 剑 。 其 次 ， 即 重 {xs} 超 线性 
фо, a, 一 x 382 k HIR 28 КЎК. 
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54 ”牛顿 法 的 收效 性 分 析 


牛顿 法 的 主要 优点 可 见于 以 下 二 个 定理 。 

жыз. 4.1 И 
对 任何 ч жс, д), эш 

X,+] =X, F (х,у! (x,) 
IHE k TT EA B i 41211 Z EE. FAE ЕШ Рх, 

定理 8.4.2 《小 顿 法 的 平方 收 纹 性) 

BEF, ®”-»К" W RITI. F' G) 在 点 x* 满足 Lipschitz 
RF IRANE IE R R K fd 

ПЕ" (x) ~ Е’ (х) aix 一 X#| Vx € D (8.4.1) 
成 立 ， 则 存在 正常 数 4 使 

|x, í -x* | Sq ix, — x*: 2 (К=0,1,+#) (8,4,2) 
Бі, BHX EDE FARA. 

清 注 意 ， 和 一 维 情 形 类 似 ， 可 以 证 明 ， 如 果 D 充 分 小 ， 而 
F(x) їх К К пре, ЫА: 08.1.1) 即 能 满足 。 所 谓 F(x) 
x 处 二 次 可 徽 ， 这 申 是 指 乒 (x) 的 所 有 分 量 图 数 f(x) (= 

„ n) е с р, 


+ 仿照 定义 8,2,.1， 对 二 阶 导 数 可 作 如 下 定义 : 
ZF: DCR" =R" É D X Fréchet Yi, х J DRNA, EAER 
BEREA, R< R" >R" 使 


lim. |F (+ А) –- Fix) ~ АА| = 0 
па тар! ака 


或 
Е'(хъА) = Е (х) + АВ+ ©(|А|) 


对 所 有 АСА” R, MU 广 (z) 和 在 点 xz 处 二 次 可 微 并 称 算 子 4 为 上 在 点 x 处 
й, ША = Ё), 
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АПК Ах) Ер Ел (8.4.1) 为 假设 2。 
为 了 证 明 以 上 二 个 定理 ， 我 们 首先 证 明王 面 几 个 引 理 ， 
引 理 8. 4,1 БЕА (х) ER E R x*C D 4 yE 8 H. 
A(x*) 0465, ЛИЕ 5 (хи, о) ср 及 正 数 7Y， 使 对 一 切 
хЄ5(х*, 8), А(х) JR20343E52 E. 
А (O) |<. 
证 а= Адо), MELE, ABEN BAPU 
的 6>0， 岂 保证 SEC，0) ср 且 当 xESix#,，6) 时 有 
| A(x*) — А(х)|<В 
成 六 ， 据 A(x) {к х* 处 的 连续 性 ， 这 是 能 办 到 的 。 考虑 到 当 
x CS(x*, д) 
|- А (х%) A (х) | [А (х%) 1]. | А (х*) — А (ж) |<08<1, 
(8.4.3) 
x 
A(x*y-'!A(x)=]-—(I-—- A(X”)! AG), 
A, Щх6Є$(%*, 4) |, А(х*) 1А (х) KAJE, РЕА (х) 
亦 必 为 非 异 。 又 当 x CS(x*，6) 时 应 有 
ПА (0) = G- А(х*) -1ACK) J] 1A (х®) -1 
< ||A(x*%) 1] I- (1- А(х*)-!А(х)у]7!|| 
яс |А (х*) 让 1] 一 |z- А(х%*) -:А (ж) || 
а 
1-aB = 


有 时 以 二 引 理 常 以 下 面 形 式 出 现 ; 设 A,ER"*" 而 AE 
R" " 非 异 且 


从 


| A, -А|<8, 
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#|A- |< a B а8<1, ша лды 
HARIS] ат (8.4. 4) 
文献 上 常 称 这 个 引 理 为 eh 引 吾 ， 证 明 过 程 则 完全 和 引 Ж 
8. 4。 1 相同 。 Banach 引 理 的 意义 就 是 ， 若 A, 能 接近 一 个 可 j 
阵 ， 那 末 A 本 身 也 是 可 逆 的 ， 
引 理 8.4.2 设 : Га, b]C R1!—R" 连续 ， 则 有 


Š b 
Песоа <| le lar, (8,4,5) 


证 ， 由 于 lip( 1 是 + 的 连续 函数 ， 故 9 (t) ERTH. E 
向 量 函 数 的 积分 定义 知 ， 对 任意 给 定 的 2 记 0， 存 任 分 划 a= t 
<. <t, = рф 


еса ~ Dot E- tD e. (8,4, 6) 
KAE, Ўл ЕН 
| [пес бае 5 реса, -td «е, (8, 4.7) 


由 《8.4.6) 和 (8.4,7) 即 可 推 知 
|| фае (t, = ёру) +E 


i=l 


<> |Ф(#Ф#](#Ф;&—%,_,) +e 


я = 


b 
<f lpt dt+2e, 


因为 为 任意 小 的 正 数 ， 故 〈8.4.5) 成 立 。 

中 值 定 理 在 一 元 项 数 或 多 元 函数 微 积 分 中 点 有 十 分 重要 的 
地 位 。 对 于 向 量 函 数 的 微 积分 情况 也 是 这 样 。 不过， 它 的 中 值 
定理 的 形式 略 有 变化 。 

引 理 8.4.3 ШЕ, R"—R' W EBRIO, MAER z, y 
єр 有 不 等 式 
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[Е Су) — F is) «тах |F' [z +107 – ж) Js - yil (8.4.8) 
<'<1 


ШЖ AFDATA, ИА] 0<71<1, z+t(í(y- x) C D, 
Е F’ (s+t(y-s*s)) HEX., IHEM Y, ED 以 下 等 式 显然 
BY, 

1 d | 
{ж а = | phatmi бт, 6,7244 
| Ут 0. саъісу - ED dt 
0 £ дб 
= | Hetty- y- ndt, 
0 
于 是 得 到 F(x) 积分 形式 的 中 信和 定理 : 
Е (у) — F (z) = К^ тк+ у-у -sdt, (8. 4.9) 
0 


ӨН НИ УЫ ЖО ИНЖ SQ (8。4.5)， 即 可 推 得 (8. 4. 8)， 
引 理 8.4.4 1: Р. RR" WEALD, MEHE 何 x， 
y. z€ РДЕ FA 38 K 
ПЕ (y) —F (z) 一 天 (x) (y — t) Птах P [#+1(у—Е))] 
-F (x) || y ~] (8.4.10) 
成 立 。 进 而 ， 如 果 F' (х) 在 也 中 Lipschitz 连续 ， 即 对 任何 x， 
yC D, {ЕШ 3W3 K, Е 
IF (xy — F” (y) !|<xk|ix — yi (8.4.1]) 
成 立 ， 则 
ЕС) - Е (к) -F (х) (у 0) || «косу, ж) |у – 811, (8.4.12) 
其 中 oly, z) = maxf |у - х, ||2- Х|}, ЖЕШ, 3 s= x 了 时 有 
不 等 式 
ЦЕСУ) -Fo -F tx) (y —x) 1 二 二 xlly – |2 (8.4,13) 
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成 立 ， 这 里 x 2 Lipschitz 常数 。 
证 AJA (8.4.9) 和 53| 理 8.4.2 可 推 得 


1 
JF (y) -F (z) — F? (x) (y — ж) | = || RG [£ +t(y —&)] 
- F’ (х) (у — z) dt| 
<f F Гау к) - F (x) у – к\а 
0 
< max |F [s +t(y-8)] -F (x) ||ily -sli 
0<#6&1 
Ф F! (х) Е Dh Lipschitz 连续 ， 那 末 可 进一步 推 得 
ПЕ (у) -F (s) — F? (x) (y — £) «к ieron] 
0 
~ x|; l|y — g |dt 
<k тах! ж + t(y — z) – xli||y — z | 
00 =< s 1 
©. = Ko (Y, £) |у — 81. 
而 . ; 
|F (y) — F (x) — F’ (x) (y) |== x|ly- zl: | tdt 
0 
= ук\у-х*, 


至 此 即 能 证 明 早已 提出 的 定理 8. 4.1 和 定理 8.4.2. 
定理 8. 4.1《〈 和 牛顿 甘 的 局 部 收 伊人 性 ) 的 证 朋 : 


据 定理 8. 4. Е, F оо 在 点 X*#EDD 处 连续 且 F” (x*) X; 
非 异 ， 故 利用 引 理 8. 4.1 知 : 存在 闭 球 S, 67) D X E 
?》， 对 一 切 xXE S(x*, 0/7), F' (х) 为 非 异 且 F(x) j| <v, 

BFE. EF (x) 在 х* 处 的 连续 性 知 ， 对 任 给 定 的 E> 


0 总 存在 9>>0(6 近 0 )， 对 一 切 x*ES(x*，6) 有 
|F” (x) — F” (x*) |е 


Жу, XE Р(х) T x* 处 -可 微 ， 我 们 可 将 6 选取 充分 小 , 使 


2eY = 4а<1 且 不 等 式 йз 
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|F (x) — F (x*) — F” (x*) (x — x*) || ce||x —х*|| 
Vx CS(x*, д) 
成 立 。 
现 设 xES(x*，6) 并 记 G(x; =x-F (x)-!1F(x)， 则 有 
[С (xy — x*|j = |x- x* — F” (x) 1cF (x) — F (x*) ]|| 
=< l|- F“ (x) CF (o — F (x*) 
=F’ (x*) (x — x*) || 
+ ЦЕ, (ху — F: (x*) |||x ~ х*\\7] 
<2ey |x —x*!|| = glx 一 zx 加. (8.4.14) 
现 若 取 x, Elle -~ x*| <ó, ДШ (8.4.14) Bin x i= GO, 有 
lx — x*||<qllx, —x*|| <qé <a, 
由 此 可 见 xi 和 ES(x#，6) 。 利 用 归纳 法 即 可 证 
læ, = x*||<çqa|x, -, —x*|| <ó : (8,4.15) 
对 所 有 的 k> HRA AE х, = G(x -1)。 逐 次 利用 这 些 不 
等 式 即 可 得 到 
|х„-х*||<<а*||х,—- x* | (k= 1, 2,66), (8.4.16) 
х 0<4<1, Ж 
lim||x, —x*|| = 0, 
亦 即 


limx, = x*, 


k -+ 00 


这 样 ， 我 们 就 证 明了 牛顿 法 的 局 部 收 伍 性 ， 
再 令 


[ |Р (x,) — F (x*) — F” (x*) (x, —x*) || 
ае, — x*|| 


+ |F? (x,) — F (xs) | ] =a, 
则 据 (8.4.14) 民 有 
26, + E х* |9,1, = х* ||. (k= Ü, l» see) 
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据 F (x) т: х* 的 下 -可 徽 性 以 及 请 (x) 在 x* 处 的 连续 性 即 可 推 
知 | 


тт, = 0, 
А АВЕ) БИТЕН НИС АЈ. 
定理 8, 4.2 的 证 明 : 
由 不 等 式 
Паж. -— x*|| Е (x,) ОЦЕ (x,) — F Ge) 一 


- Ё’ (x,) (x, — x*) ||, 
并 用 引 理 8. 4. 4 即 可 推 得 


х,.,—х°*| «бука, – x* l: (k=0, 1,°+), 


Hs] б, p E ye t, | 
至 此 ， 我 们 有 必要 对 定理 8. 4,1 ЕНДЕР РАБ. ЕДЖ 
代 法 实际 上 可 看 作 形 如 


x = G (x) (8, 4.17) 
КЕ EE PEH URR ФЕ, БП 
X,, ССА) (k=0, 1,1), (8, 4.18) 


定理 8. 4.1 主 要 论证 了 函数 G(x) 满 足以 下 三 个 条 件 ， 

(1) е. о, В Сх) 在 该 闭 球 上 有 E 
X; | 

(2) G(S(x*, д)) C S(w*, д); 

(3) 存在 4E (0, 1› 使 

|С (x) — G (x*) ||ça|lx —x*|, ухє^(х*, ð). (8,4,19) 
第 三 个 条 件 通常 称 为 压缩 条 件 。 在 定理 8.4.1 中 这 个 条 件 实际 


上 是 
G” (x*) = 0 © (8,4,20) 


> 499 > 


或 


red (2%) | = 0, 
REM (8, 4,14) 看 出 。 一 般 地 ， 若 G(z) 在 x# Е #Eu Ta Н. 
PIG (х%)) <1, (8,4, 21) 


即 能 保证 存在 球 S (x*，6)，G (x) 在 SC(x*，6) 上 满足 压缩 条 
件 。 事 实 上 ， 据 范 数理 论 知 :对 任意 给 定 的 2 沁 0, 存在 某 种 范 
Zelle Ila tE 
[G (x*) |p (G (X*)) + e, (8. 4. 22) 
而 对 e>>0 又 存在 SC 和 д), "4 xCS(xz*, ó) ME 
Ф (x) — G (х*) ||, <| le [x*+t(x — x*) lx 一 x*|| dt 
< (G (x*)|||, +2) 1х жж], (8. 4.23) 
成 立 ， 从 而 | 
` ||G(x) — G (x*) |< (p(@” (х*)) + 2e) x — хе], 
HT e 的 任意 性 ， 故 总 有 4= (0(Ф/ (х*)) +28) <1 R ED 
G(x) 在 SC5 5) 上 满足 压缩 条 件 ， | 
从 以 上 几 个 定理 可 以 看 出 ， 和 牛顿 法 有 二 大 优点 (Brown 3 ` 
法 亦 类 似 )。 其 一 ， 在 一 般 条 个 下 千 否 法 是 超 线性 收 #@ 的 ;如 
果 再 加 上 假设 2 这 个 条 件 ， 那 末 牛 顿 法 至 少 是 平方 收 伍 的 。 粒 
上 略 地 说 ， 后 者 意味 着 牛顿 鞭 每 迭代 一 次 ， 有 效 数位 基本 上 增加 
了 一 倍 ， 这 就 是 说 ， 如 应 由 准确 到 一 位 的 近似 解 出 发 ， 那 只 要 
经 四 次 迭代 就 可 得 到 准确 到 十 六 位 的 近似 解 。 其 二 ， 牛 厌 法 在 
一 般 条件 下 总 存在 一 个 吸引 域 $。 换 言 之 ， 只 竖 初 始 近 似 解 落 
在 8 中， 那么 由 此 出 发 ， 生 成 的 迭代 序列 (x,) 总 不 会 越 出 Bü 
5, HBWIWS F x#。 
另外 也 应 指出 : 牛顿 靶 是 自动 校正 的 ， 这 就 是 ixi, 仅 
ХЖ Р жх, 因而 前 面 选 代 时 产生 的 舍 人 误差 不 会 一 步 


е $19, 


步 传 下 去 。 牛 顿 法 这 一 优点 我 们 将 会 看 到 并 不 能 为 拟 牛 顿 法 所 
正如 我 们 在 引言 中 星 就 指出 的 ， 确定 一 个 初始 近似 解 zo 有 
时 是 很 困难 和 的， 这 正 是 生 顿 法 的 一 大 缺点 《Browan 32; ?£ 46 — 
样 ) 。 关 为 对 某 一 其 体 间 题 ， 孜 引 区 域 s 很 可 能 极 小 , 因此 初始 
近似 和 解 必须 寺 得 很 宁 ， 然 市 这 常常 是 很 难 本 到 的 。 克 服 这 一 馈 
点 的 措施 之 一 ， 可 以 在 牛顿 公式 中 引 人 收 敛 因 了 于 和 >0， 以 扩 

大 站 化 区 域 。 这 时 友 代 会 式 具 有 如 下 形式 ; 
Xati =X АЁ (ху FO) (k=O, 1,*=)(8,4.24) 


而 知 此 选择， 以 保证 (TF (x, ||} 291838 8 РВЕ ВЕЗУ). ER 
的 办 法 通常 使 Mo>0 为 航 值 问题 

а аА (х,) IF Cx,) (8, 4, 25) 
ШЖ. W ФКА = |F Ex, -AF (xy !F (x,) || 20 X Га, 5) Е 
Ў Ме ҢА ШЕ К, ШУЛ А, 可 采用 0.618 优 选 法 寻找 。0.618 
搜索 方法 的 步 野 如 下 ， 

TE A, 的 预 估 区间 [ao， 妇 中， 计算 两 个 试验 点 @ =a+ 
0.381966(b-a), bi=a+0.618034(b-a)b 以 及 其 上 的 函数 值 
PiP, WME PKF MEEA, bi] 为 新 的 估 值 区 间 ， 否则 取 
计算 的 两 点 之 一 可 由 前 次 算出 试验 点 近似 替代 ， 而 另外 一 点 又 
近似 等 于 区 间 端 点 之 和 减 去 已 知 的 试验 点 。 所 以 ， 除 第 一 次 需 
要 计算 两 个 点 上 的 函数 值 外 ， 以 后 只 要 计算 一 个 新 点 上 的 孙 数 


Ф) 一 个 洱 数 9?: Га, b]CR1-=-R! 在 Га, bJ 上 是 严格 单 峰 的 ， 如 果 存 在 
АФЄ Га, b] eLa, bjk h HAREA, ae 
Са, b], ли СА", Ж 1ї'б=сд#, PANSA, Fata, N 
PUSPA). 
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值 。 当 区 间 长 度 比 原始 区 间 长 度 小 到 0.01 售 时， 搜索 结束 并 取 
其 中 点 作为 A。 入 的 预 估 芝 间 可 取 [0，1。6180344-1], ЖА. 
事先 选 定 , 可 取 0, 1 或 1。 的 预 估 区间 可 到 [0, 1.618034А,-11], 
这 里 А-1 HAREE ЕЕ ЫЗ. 

HFa Fi A (Brown 方法 也 类 似 ) 是 :对 每 个 上 都 
必须 计算 矩阵 F (x), туш Р(х) К O (n) 次 算术 运算 求 
解 线性 方程 组 。 这 就 是 说 ， 每 一 步 都 变 计 算 n 个 篇 导 函数 值 ， 
РКЕ Р(х) 而 言 ， 完 成 它 将 花费 很 大 的 工作 量 。 因 志 , 如 
果 对 某 一 问题 的 Jacobi 短 阵 址 对 而 言 计 算 量 不 太 大 ， 如 Jacobi 
短 阵 为 大 型 确 足 矩阵 ， 那 未 牛顿 法 是 信 得 采 用 的 ， 如 果 对 其 一 
问题 的 Jacobi 矩阵 的 计算 量 很 大 ， 那 末 可 选用 各 种 修正 的 牛顿 
鞭 或 其 它 方法 。 例如， 为 了 减少 和 牛顿 法 中 矩阵 求 逆 的 次 数 ， 一 
个 较为 普遍 采用 的 技巧 是 : 在 一 定 的 迁 代 次 数 内 ， 合 Jacobi 甜 
阵 固 定 ， 这 对 于 Jacobi 咎 阵 变化 很 懂 的 情形 是 十 分 有 效 的 . A. 
体 说 ， 定义 Х,+у= Ун, Yro = X, П) 

Уу = Yaa F (x) FKL (ў=1, 2,=s, К). 

(8, 4.26) 
可 以 证 明 由 (8. 4, 26) 产 生 的 送 代 序列 (x, Sky Ж 22 К, + 
1( 习 题 8.7)， 所 以 它 也 是 产生 高 阶 迭 代 过 程 的 一 个 有 效 且 简单 
的 途径 ， 

最 后 还 必须 指出 ， 如 果 Р (х) 奇异 ， 那 末 牛 顿 靶 的 收 敏 
性 质 就 要 被 破坏 。 近 年 来 ， 对 于 奇 兴 成 的 和 牛 弄 法 已 有 许多 研究 
Ж. 


+) 设 序列 {ху} KAF xx， 则 {x 让 的 收 钱 阶 为 
р= %0р{аЄ#! | lim- а. эү ECO, оо) 0 9291), 
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55 ”离散 的 牛顿 法 


由 前 节 分 析 我 们 知道 ， 牛 顿 法 的 主要 缺点 是 对 每 个 上 都 必 
须 计 算 矩 阵 F” (x;)， 亦 即 对 每 个 k 都 必须 计算 nt 个 导 3k. B 
Ж, ATRE RESAS ЖР (x) th G, р FB — + 2 
商 来 近似 替代 。 换 言 之 ,将 Jacobi рез. ЛЕА А ЙО 


дм, SE DI — Br B 


fs е, thre) = f(x.) 
替代 之 。 其 中 e; ARS j 个 单位 向 量 ，hs 常 取 作 ОСЕ (x,) l| 
或 O(|f1 (x) 1) 。 在 此 基础 上 可 构成 一 类 离散 型 咎 畅 算法 Ni。 
算法 8.5, 1 (Ne 算法) 
1) X k=0, Len т, 
1.1) 对 充分 小 的 步兵 В, Б BE y, È ÉS 95 j У] 


为 
Jat, = 人 ы: 
k 


1.2) 用 近似 Jacobi [8 J, RE CHIER HIT ko 次 
«АЕ КЕЕ", КЕЕ X Xal =, Уа = x, ПП 

Yr; =y,;-:—- ЈЕСУ, ; 1) (j= 1, >°, ka), (8,5,2) 

1.3) жх, АОК, ДЕЗ), ` 

1,4) ТЖ Р(х, ,,) ARF: +h +e) Cj=1, ша. 


(j=1,*…, n), (8.5.1) 


n). 
2) NEXT k. 
3) @х*=<х,.,, 
4) END., 
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与 习题 8. 7 类似， 在 一 定 条 件 下 ， 可 以 证 明 М, 算 革 的 收 纹 阶 至 
少 为 ko+1。 顺 便 指出 ，N; 算法 每 迭代 一 次 需 计 算 %+ 和 im 次 函 
ЖЖ, Ох Ж} ШЕ И Р(х) 的 图 数值 ， 其 每 次 计算 应 包 
# n КАРАЕВ). 

很 自然 Brown 算法 同样 也 能 离散 化 ， 离 散 Brown A 法 的 
主要 步骤 如 下 ， 

第 一 步 : 设 Xx, 为 《8.1,1) Ж хе 的 近似 值 ， 则 对 函数 妨 
É x, 的 近 傍 用 线性 函数 

ҺОе,) +u (x) (El E H e t fenar Xe) (£, ЁН) 

| (8.5.3) 

ШИВ. Вх (Éi e En) x. = (200, 66, ЁО) 


ск) © 
м» (Fe) = ы at UOR (8,5,4) 


(ЦРВЕНЕ, ЖТ h ЕТ, ЖЕТЕ). ШЕ 
x, 充分 接近 x*w， 那 末 可 令 (8, 5.3) 式 为 零 ， 并 由 此 解 出 一 个 变 
R. їшїн, ШЖ fs O 按 模 最 大 ， 刚 就 可 解 出 ¿, Ж, Е 

上 = £p — > (fk MR) EEP — P fia, (8,5.5) 
其 中 И у ы бы, Г =, БЕД, Р(х) 在 假设 
1 的 条 件 下 ， 至 少 有 一 个 非 零 偏 导数 -9 台所。 因此 ， 相 应 的 
近似 偏 导数 fu. 亦 为 非 零 。 这 样 (8.5. E 总 是 有 意义 的 。 选 
取 绝 对 值 为 最 大 的 近似 篇 导数 相 除 ， 其 作用 类 似 于 用 高 斯 消去 
法 求解 线性 方程 组 时 ， 采 用 部 分 主 元 素 方案 ， 以 保证 方法 的 数 
值 稳定 性 、 由 (8.5.5) Жая IB, Z. 75 ДЕ n- 1 ЕШ Eo 
£ б, En- 的 线性 函数 ， 为 书写 清楚 起 WL, ië (8,5.5) 的 左 
端 为 L, (Ë, = En D BE М LPE L (Е, e ER) 

第 二 步 ， 对 函数 fi， 定 义 新 函数 
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ва (ED 二 (56) 
Н ја в == ў, (500, 66,290 GLO). ЕЖЕ g: 是 变量 二 
Б. ВОВА. ЕН, ЖЕҢ СЕЧАТ, ,E61 ) 近 傍 以 线性 函数 
近似 替代 g，， 并 由 比 解 出 一 个 变量 , 设 Ena 对 应 的 近似 偏 导 数 
Enon 按 绝对 值 为 最 大 ， 于 是 解 得 为: 


Ё) = СА: 1 29 СНУ һ) (š; - ËA?) =g P /BE 


(8,5,7) 
这 里 近似 偏 导 数 BE a . 
— се 和 | 
УНИ — Е 
(8,5,8) 


H (8.5.7) Ай, Ei WER п-2 TRENERKA. MRE 
线性 函数 记 作 L, i (Ër s 5- 2)， 同样 定义 LA = L,- EP * 
6..2). AEE: 此 时 应 把 工 , RAI Eni Ph 2 Lai ИШ Bd 
L, HEE Жр б, ts Èn- as Ln-1 (Sl tts n-e) e 

继续 进行 这 种 “逐步 代 人 ”的 过 程 ， 至 第 +l 步 , 得 到 线 
性 表达 式 


站 -一 | 


Ls- = ë, 二 21 (gisi LÉ; ‚/&*1\. fn- nh) (£1 — 6?) 
jz 
~ BE/ Bi А! , (8, 5, 9) 
其 中 E 
gA = wE, ре A {+1+* И), | (8.5.10) 
рік) Біл (ET, е, 20, зБ. +h, EM ie .... Е) -6R 
i+ k = h 


(ф=1,+е,л-1). “ (8.5.11) 

出 此 可 见 ,让 完成 第 i+1 步 时 ,一 个 主要 的 工作 就 是 要 计算 gi,1 

在 点 СЁ, e Ё) тех, 00, +he;(j=1, n-i) 
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处 的 值 。 请 注意 :虽然 计算 gi,1 就 是 计算 fi;,1,， 但 这 时 fa В 
变量 的 后 i 个 分 量 为 Las L,- i "y L, акло HH Lny Li, -is *** L,- ira 
АВАЖЕ Уя: 
а (Eee 
1,13 | (Eis 9986,15: L,- i+ 1 °, 1-2) 


L,- i+: (Š, Ёа L,-ir1) 
L,-i+1t (Éis “Ë, i), 
H e Fy RL, Las kasis "9. Lu-i+! 在 点 х0, 和 х, + һе; (j = 1, 
n-i) WR, WA Leii 出 发 通过 逐步 回 代 求 得 。 回 代 方 
程 取 
EBD (L-E) 
— Ё, -.{Ен- ған (5=% — Ї, n- 1), (8.5. 12) 
GER: EWH ROA х, WERE, KERE} RRM nit 
始 ) 。 其 次 ， 在 确定 :了 La-i 之 后 ， 在 L,» L,- se., L, i+1 ШАШ 
H Eni ZAA L, BR 
第 4 步 ， 这 时 有 
g.= f, (2, Ls °°, Ln), С 8,5.13) 
Ан (i= 2,3,-=, n) 应 具有 如 下 形式 : 


-1 
Li= EP- Р, (лк, к Brkt sh) CLi — 8982) 


В ЕК tese (8,5.14) 


它们 当然 都 是 变量 5, 的 函数 (为 完整 起 见 ， 定 义 L =ë, g = 
fd, RIE g, 亦 为 单 变量 & 的 国 数 。 在 点 上 ШЇ, ШЕКЕР 
数 来 近似 替代 g,， 并 由 此 解 出 

ESEP УДА) sy (8, 5, 15) 
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于 是 求 得 8+0, E £t 的 第 +1 个 近似 值 . 现 记 Li 二 E41+! 
并 利用 三 角 方 程 组 (8.5. 14) 逐步 回 代 ， 即 可 解 得 ER O, e, 
сек | 
К ЕРЕ S ЕК, BES SISI Sk ЖЇЕ(8.3.5) 或 
S8,3.6) Ж (8,3,7) 为 止 。 
FE, ВИ LÈD A 2 i zs pk ГАФ. 
算法 8.5.2 (Brown 方法 ) 
1) 对 = 0,1, (mm 为 允许 的 最 大 迭代 次 数 )。 
1.1) 对 i = 1,2, ,n(n 为 未 知 数 的 个 数 )， 
1.1.1) ÆRE i TEM s 的 各 个 离散 偏 导数 
Bisina? 
1.1.2》 导 找 其 中 绝对 值 为 最 大 的 篇 导数 ， 即 
|& гыл] = зах, LATT 
1.1.3) 形成 方程 组 (8.5.14》 中 第 i 个 方程 ( 关 
FTL) 的 系数 。 
1.2) NEXT i, 
1.3》 回 代 以 求 得 下 一 个 近似 和 解 X41。 
1.4) 如 满足 收敛 条 件 则 转 3). 
2) NEXT k. 
3) END. 
牛顿 法 每 迭代 一 次 要 计算 ”个 候 导 数 以 及 计算 ?3 个 分 量 
KRE. MK, Brown 方法 每 选 代 一 次 又 需要 计算 多 少 次 函数 
AWE? 
据 以 上 算法 可 知 i=1 时 ， 锯 计算 二 的 nt+1 个 值 ， i=2 
时 ， 需 计算 个 f, 的 值 ， 依 次 类 推 。 由 此 可 知 ，Browa 方法 
FRERE 
S = 52531 


i 
£ 2 
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次 函数 值 计算 。 从 这 里 显然 可 以 看 出 “逐步 代 人 ”法 的 优点 ， 
当然 应 强调 囊 出 ， 这 里 函 数值 计算 的 节 省 仅 指 原始 方程 组 
(8.1.1) th f й. PEE, Brown 方法 还 包括 好 些 其 它 函 
数 的 计算 , 即 线性 函数 L, 的 计算 .但 这 些 计 算 并 没有 计 人 
тт куп ЖЕ. БО, 只 有 当 函 数 f, 的 计算 较 繁 复 时 ,Browa 
方法 相对 于 Ni 算法 而 言 ， 计 算 量 才 有 真主 的 节省 。 _ 

因为 Brown 方法 每 次 由 对 -一 个 方程 f;= 0 运算， 而 在 处 理 
下 -个 方程 fa =0 时， 又 即刻 利用 已 得 色 的 信 息 。 因 此 ， 对 
于 方程 组 ( 8, 1,1) 就 在 在 一 个 最 优 次 序 的 问题 。 也 就 是 说 , 方 
程 应 预先 作 这 样 的 最 优 排列 ， 线 性 方程 排 在 最 前 ， 以 后 方程 按 
接近 线性 的 穆 度 依次 排 询 。 能 够 采取 这 种 最 优 次 序 的 措施 ， 是 
Brown 方法 的 一 个 优点 。 

下 奋 我 们 不 加 证 明 地 引信 Brown 方法 的 局 部 收敛 定理 。 

定理 8,5.1 15 Р; R"->R" 满足 假设 1 ， 则 必 存 在 一 闭 球 
$(х*, 5) ШЕ е, @җЄ$(х*, 6) 且 {hno e AR, H 
Brown 方法 生成 的 远 代 序列 (а, 收 你 于 x*。 如 果 F 还 满足 假 
设 2 Н.п =0(1/, (х,)), MHL 至少 是 平方 政令 的 。 


BAE J 题 


8,1 AJH HMHM Brown 方法 六 下 列 线性 方程 组 . 
ёзъ = 4， :61+53 +615 i, 

1) ‚з а - | ii ) 261 + -4 = 9, 

Ө 1 3 ; 1363 - 425+. =O 


准确 到 四 位 的 近似 解 。 初 始 近 似 解 分 别 联 xo = (1.6,1.2)7 和 x8 = (0,5, 
0,.5,0.5)7, 
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8.2 1 
上 O x-0; 

f(x) = 1 
ЕЗЕТ AED IKE ЖЕ +61), хб, 
证 明了 f(x) 在 x=0 处 偏 导数 存在 ， 但 不 存在 F- 导数 。 
8.3 7) = 236181, ЗЕ ХЖ 70) 的 一 阶 和 二 阶 Frécht 导 
ж. 
8.4 ” 试 证 ， 使 (8.2,14) 成 立 的 给 阵 4 至 多 只 有 一 个 。 
8.5 设 £, А" EROE D EF- BJ S, T&HE FU (w) 在 口内 连续 
的 充 要 条 件 是 所 有 的 偏 导数 Ei G, j= 1.2, n) E D 内 连续 ， 
86 设 {Xi}CR" 是 由 先 代 算法 MER, CHAF. 1.17? 的 解 xy. 
# xr ш: А .| 成 立 等 式 

lim|x,- x#| 1 = 0, 

则 称 {жук - 超 线性 收 化 于 xe. 试 证 ， 如 果 {x 由 商 超 线性 收敛 于 x， 则 
(жар д R- МЕН, БЕУ ЛОЙ ЗУ. 
7 ” 设 Atx)ER"** 存 点 x 和 ED 处 连续 目 АСФ) ЕЯ, ПА 
闭 球 S(x@ 0) CD, ASA S) 上 A(x)-1 在 x* 外 连续 。 
8.8 ЖА, DCR"—R" ZE x€ kk F- TA, EXO fE D БИЕ ВЕ А (х) 
Сч" 在 x 处 连续 且 А (Ф) Е, MEER 500%, ó) СР, ER 


6% 
Сх) =x— A(x)] IF (x) 


企 其 上 有 定义 且 CFE хе Ah F- и], Р- FRO 
G (x8) =F- (А(х®уу LFE (axt), 

8.9 ЖА, R'A” 满足 假设 1 和 假设 2， 试 江 由 (8,4,26) HERE 
{КАЕ {х KANEDA kotl. 
8.10 ” 设 非 线性 方 穆 组 为 

fi (Ès E2) 三 5 +106152 + 452 +0,7401006=0, 

f2 (Ë b2)=E3 - 30,55 +288 -1.0201228=0; 
iki ЈАТ RO А АЈДЕ. БАЕ АНХ xo = (0.1, 
~0,1)T，e) = £2 = 1076 或 自 定 。 要求 最 后 打印 方程 组 近似 解 , 函数 六、 
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fx 的 值 以 及 送 代 次 数 . 
8.11 F. RR 满足 假设 1， 试 证 存在 一 闭 球员 0) 以 及 正 
数 B 使 | 
Р оо 26ке],  Vxe збе, ду 
成 立 。 
8.12 ”编制 一 个 离散 Brown 算法 的 程序 ， 算 法 中 
hSO)(j- 1. .1) 按 如 下 规定 选取 ， 


ho =тах{в( Ө; 5% ]1079*?}, 
aft = minfmax (Jf, 194827,5, 9500), 0,001 х!\аўю!}, 
其 中 入 为 机 器 的 有 效 数 位 ， 
8,13 ”利用 上 题 程 序 求 忆 下 非 线 性 方程 组 的 近似 解 ， 
б (6, &2)==2E -El—1=0, 
l falo Ёз) = £2 -E24=0; 
КЕ (£1, 62) ==с08(0,462+&:) + Et +2: 1,6-0, 


£3 хо (1,04, 0,47)7, 
0.35 719% 


ху= (1.2, 1.7)7 


H) 


ifi (Ers 2) =1, 583 ~ 
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第 九 章 ” 非 线性 方程 组 的 拟 
牛顿 送 代 解法 


$1 拟 牛 顿 方法 的 基本 思想 


在 第 八 章 $4 我 们 曾 指 出 ， 和 牛顿 法 (离散 牛顿 凌 亦 类 似 ) 的 缺 
点 之 一 是 ， 每 迭代 一 次 需 计 算 避 +# 个 弛 量 函 数 以 及 O(n3) 次 算 
术 运 算 。 现 在 随 着 实际 问题 维 数 的 提高 ， 选 代 次 数 的 增多 ， 如 
何 减 少 每 次 法 代 所 需 的 工作 量 就 显得 十 分 必要 了 ， 

1959、1965 年 ，Davidon 和 Broyden 针对 无 约 东 极 小 化 间 
题 以 及 非 线性 方程 组 (先后 ) 提出 了 一 类 新 的 方 法 。1963 年 ， 
Fletcher 和 Powell 对 Davidan 的 工作 做 了 重要 的 修改 和 潍 清 ， 
从 而 将 这 方面 的 研究 工作 引 向 了 深信。 这 类 新 方法 的 基本 思想 
Æ, HI REB, E F (x,)， 而 Bis1 可 在 В, 的 基础 上 用 
一 个 低 秩 矩阵 来 校正 ， 所 需 的 运算 量 为 O(n)? 次 算术 运算 。 显 
然 ， 这 样 的 方案 计算 量 大 大 降低 了 。 

当然 计算 景 降 低 也 是 要 付出 代价 的 ， 偿 还 的 代价 就 是 将 平 
方 收 全 速度 降 为 超 线性 收敛 速度 。 

这 类 新 方法 名 称 签 多 ， 有 拟 牛 顿 法 、 变 尺度 方法 、 修 正方 
法 以 及 校正 方法 等 等 。 下 面 我 们 针对 非 线 性 方程 组 来 引 人 这 类 
方法 。 

WF, "Е" PERA 1, х. Єр 2,50, X, + 3, = x,, E 
D, 则 据 引 理 8. 4. 43554: HAERES, АЕ 6>>0, Ч], 一 
Xll <ó 时 使 
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ШЕ (х„) = F rga) — F (x,, ) (Ke~ rp e) EEN Kpa || 
(9,1,1) 
成 立 。 因 此 有 
FOX) æF i) + F ia) (0-2,1), (9. 1. 2) 
其 近似 程度 随 .x, -Xal 的 减 小 丽 增 大 。 如 果 要 求 Bi, :来 近似 
替代 F (x,,,) 的 话 ， 那 末 很 自然 地 要 求 B; 满足 方程 
F(x,) =F (x,,,) + Brei (X, — Х,,,) (9,1,3) 
| Bre s.= F(X,,1) 一 F (x) . (9.1. 4) 
如 果 F(z) 为 单 变量 函数 ， 那 末 (9.1. 4) 即 为 


B = Ех,.1) — F (X,) 
请 十 一 一 а 
X,, T Xk 


上 式 右 端 表示 点 Ai 处 F(X) 的 差 商 ， 所 以 (9.1. 4) 常 称 为 广 
LEERE. Б Bai TAARE F (x,. 1) 的 近似 矩阵 ， 所 以 
(9.1.4) 又 称 为 所 咎 顿 方程 ， 它 是 发 展 所 和 牛顿 法 的 一 个 h 心 。 
前面 已 经 指出 ， 除 要 求 B :满足 拟 牛 帧 方程 之 外 ， 我 们 还 
ABB 1 能 表示 为 B+ AB,， 这 里 AB; 为 一 低 秩 和 矩阵 。 这 样 就 得 
到 了 一 类 选 代 算法 ; 
| X41 = x, — ВСЕ (x, , 

\ Bis Xer X.) = Ё (x, ,) — F(X,), 
“В. = В, + АВ, rankAB, = m2>1, 
如 果 对 所 有 的 ，B"= H, FE WROL DYRERE 
的， 利用 Sherman-Morrison-Woodbury 公 式 (习题 9.2) 可 得 到 

4 于 的 一 个 显 表 达 式 。 其 体 地 说 ， 因 为 rank(AE) =m， 而 任何 
Pk т AI n ИТЕРЕ ЕН 2 20 
АВ, = ШУ, О, + У, € R"*”, 
ranky, = ranky, = n, 


(к= 0,1, +), (9,1,5). 
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ш (I+ VB TU, Е, WA 
(B, + UVD? = В ~ ВА + VIBU) VID, 


AH, = Y,WT, (9,1,6) 

其 中 
Y,= - BU, +VĪIBU 7, (9.1.7) 
М, = (BR) Vp. (9. 1. 8) 


显然 YY W, В" 所 它们 的 秩 均 为 机， ККАН 4 仍 为 一 个 秩 m 
上 矩阵。 这 样 (49.1.5) 又 可 改写 为 
: Ki 1 = х. - HF (x,), 


"H, CF с УТЕ, - Ё (х0 ] =X: 一 X; 
(к= 0, 1, s.) (9, 1,9) 


E EEN rankAHg=m 
以 下 很 自然 地 要 讨论 ABr АН, 的 具体 计 й, 下 258 л 绍 的 
Broyden 方法 ， 就 是 -- 种 秩 1 校 正 公 式 。 | 


62 Broyden 方 法 


为 书写 方便 起 见 ， 以 下 暂 将 矩阵 和 疝 量 的 下 标 删 去 ， 并 采 
用 如 下 符号 ; | 

х=Х,,, X=x,, $=x-—x, y=F (х) ~F (x), 

B= Brri, Н=Н,\› В= Ву, H= Hx; 

АВ= В -B, АН=Н-Н 

u=y-—-Bs, v= ~ Hu=s— HY. 

现在 考虑 校正 知 阵 AB 为 秩 1 阵 的 情形 。 © 任何 秩 1 阵 均 
可 表 为 二 向 量 的 外 积 ， 故 议 

АВ = be" becR": (9.2,1) 
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或 
B= В+ (9.2 "2) 
САДЕ Л ж ИНН 
(В + bc7)8 = y, 
故 得 
u= (с, 3), 
于 是 秩 1 校 正 公 式 应 在 下 面 范围 中 选取 
АВ = OUCT， 
而 
1/(е,з), 820; 
o={ 
0, z=0, 
或 


B=B+. (y- Ba) cT 


(ег) (s= 0), (9.2.3) 


因为 我 们 把 B 看 作 疡 (x) 的 一 个 近似 ， 所 以 确定 8 的 条 件 应 是 # 
方向 上 的 导数 即 拟 牛 顿 方程 ， 而 在 与 3 正 交 的 方向 上 我 们 未 曾 
提出 过 什么 要 求 。 所 以 , 在 与 * 正 交 的 所 有 方 向 * 上 要 求 成 立 

Ве = Bx, YEEZ={r| 0, (s,s) = 0} (9,2, 4) 


这 种 想法 是 合乎 逻辑 的 。 将 (9.2.3) 和 (9. 2, 4) 结合 起 来 ， 即 可 
得 到 唯一 的 校正 公式 
АВ = ои, 
ж 178,8), 3*0 
0, 5-0 
或 
B=B an s (s=<0), (9,2,5) 


这 样 ， 我 们 就 得 到 了 Broyden # 1 选 代 算法 ， 
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算法 9.2.1 设 F，R"->R"， хх" 的 初始 近似 解 ，B 为 
жа Е OGI K В. НЕ Р! (хуу), 它们 都 符合 定 理 9,3, 1 
的 假定 ，。 

Ж F(x). 

2) 对 KE = 0。1，…， m, 

2.1) 求 解 比 性 方程 组 ， 
BAX = — F (x,) 
+Жх,.,=х„+ Ах, (AX, = fs), 
2.2) F(x), Ш х, MERRER, WRK 


4), 
2.3) у, = Е(х,,,) — F a), 
2.4) Ж Bea 
= Елы: 
B,. í = B, + (s py Š 
3) МЕХТ k, 
4) 置 x* = Xx,1。 
5) END. 


Broyden 校正 公式 有 具有 一 个 十 分 重要 的 性 质 ， 副 在 所 有 满 
足 氟 牛 上 顿 方程 的 矩阵 集合 中 ， 了 是 在 Erobenius 范 数 意 叉 下 最 捷 
в. 实际 上 , 这 一 性 质 等 价 于 确定 B 的 条 件 (9.2.4) 。 
定理 9,2.1 设 给 定 BER"…，yER" 以 及 非 零 向 量 sER"， 
B 为 由 (9. 2. 5) 确定 的 矩阵 , 则 8 为 以 下 问题 的 唯一 解 。 
тіп(В -B| |Bs= 7). (9.2, 6) 
证 ”利用 (9. 2,5) 并 考虑 到 y= Ве 2109.179 


j= pl = 148 – д) 25 


T : 
(з, з) E 
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= 上 | 有 一 Br， 
ВИ В 确 为 问题 (9.2.6) 的 年 。 至 于 唑 一 性 刁 儿 这 样 说 明 ， 设 
СА) = 14-B …， 不 难 验证 因数 f (A) 在 集合 
N= {А|Аз= y) (9,2.7) 
L3aE-— р "5-75, Be r N ШКА Е" 中 的 -一 个 
п, DHE, Вуй CA ТЕПН М 上 的 唯一 解 (习题 9.4) 
对 校正 公式 (9, 2。5) 利 用 Sherman-Morrison 公 式 可 得 
Hb H 
| +s Hb’ 
Hp b=o0ou, 5 oHy =03+Hb, irl +3Hb = ойну, Т1 
代入 上 式 即 可 得 
вене a e gee 
HES T, wR B = HEE, BR, B 为 非 异 的 充 要 条 件 为 
Hy 0, ү | 
算法 9,2,2 ШР, RR", х, хт 的 初始 近似 解 ， 玉 为 
АКНЕ ОВЕН Е F Ох) т", 它们 都 符合 定理 9.3。1 的 
mú. 
ЮЖ F (x, ЖР" (хо). 
2) 对 万 = 0,1,6, m, 


H=H- 


. (9,2,9) 


в f: R". R АЕ DCR LEDI, ВЗЕХМЕ к r€ D H. 
x sx" 以 及 任意 :河和 《0 DRAE 
Lax? + il- ax LAR + (1~ 2)f(x") (9.2.8) 
ШЖ «7 KMA 627 оар Ее RRS. 
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2.1) х,у = x, HF (RFX) =3„), 
2.2) Е (х,,,), 如果 x;. ЖЕЛЕ ЕК, 那 末 转 4)， 
2.3) 计 算 ?, = Е(х,.,) - F x,), 


2, 4) ЕН, 
(3, -Н,У,) 8TH, 
РТ = ——; Елы ав. 8 N 
H,. 1 h #TH,Y, 
3)NEXT k. 
4) Ë х = Xk, 1. 
5) END, 


比较 算法 9.2.1 和 算法 9,7,2, 当 给 定 x, 和 Bo 后 ， 算 法 
9. 2. 1 每 迭代 一 次 ， 要 计算 ?1 个 纯 量 轴 数 ， 然后 求解 线性 方程 
组 ， 因 此 每 迭代 一 次 还 需 Om RARER. H 9.2.2 F 
一 次 亦 需 计算 个 纯 县 函数 。 另 外 ， 形 成 校正 公式 (9. 2.9) #9 
O( 台 ) 次 算术 运算 。 由 此 可 见 ， 采 用 算法 9.2.2 较 好 。 可 是 ， 利 
用 校正 公式 (9.2.5) 也 有 可 能 迭代 一 次 只 需 0 N) 次 算术 运算 . 
1972 年 ，Gi 和 Murray 所 由 了 -~ 种 计算 方案 ， 设 已 A B= 
ORGIE IE FE, К, Б 180), ШАЎ Bri 的 QR 分 
BERRO) 次 算术 和 运算。 当然 ， 如 果 В,=О,Н„ BR, Ж 
解 线 性 方程 组 B.s,= — Р(х) 就 只 需 DIEP) 次 算术 运算 . 这 个 计 
算 方 案 要 比 算 荡 9.2.2 好 ， 这 是 因为 校正 公式 (9,2,5) HER 
Б БА ПУЕ Е, KHA Bi B — F (x) 。 另 外 ， 理 论 
分 析 世 吉明 ， 校 正 公 式 (9.2.5) 更 为 稳定 。 
例 9. 2.1 利用 Broyden 秩 1 方法 求 方程 组 
fi (Ё, £2) E8] -2,-1>=0, 
15 (Ei E) =(&,—2)?°+ (ë, - 0,5) -1= 0 
的 近似 解 。 初 始 近 似 解 取 x。 = (о, 0)7。 
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解 ” 采 用 算法 9, 2. 2 计算 ,首先 计算 F(x0) = (- 1,3.25)7. 


因为 
РТ - (2 =1 
EEE в, 1) 
Ж 
= 0 -ly у, _,_/0.25 -0.25 
вә=( 1) о = ( Е ). 


据 牛 顿 法 求 得 ，xi = (1.0625, -1)7; Р(х,) = (1,12890625, 
2,12890625)7; 按 语句 2.3) 和 2, 4) 算得 


1.0652 2,12890625 
-1 - 1, 12109375 


以 及 
0.3557441-. ~ 0.2721932. 
i a е ые. 
按 语 名 2.1) 算 得 
1.0625 0.355744]--. -0,2721932--.. 
*, = ( м es ш» йу зына 
(е, ( 1.240372062--.. ). 
2.12890625 / 1-0, 1967974670 
Уа АВ ЕТ Н 2k FANA ARE: 
x, = (1.54631288332, 1,39117631279)", 
如 果 用 和 牛顿 法 , 那 末 只 要 经 七 次 迁 代 到 能 得 到 这 一 结果 . 因 次 ， 
就 一 般 而 言 ，Broyden 方法 的 收敛 速度 要 较 午 顿 方法 收敛 速度 
惕 。 当 然 ， 对 两 个 联 立方 程 的 情形 ，Broyden 方法 的 优点 显得 
FAH., REZERWA HE., REAN RAN, EHAE 
才能 显 出 它 的 优点 。 得 到 这 一 -好 处 的 代价 就 是 收敛 速度 较 生 顿 
法 要 稍 慢 一 点 。 下 一 节 我 们 就 来 分 析 Broyden 方 法 的 收 敏 性。 
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$3 Broyden 方 法 的 收 仇 性 分 析 


首先 应 该 强调 指出 ， 以 下 采用 的 证 明 技巧 也 适用 于 其 它 所 
牛顿 方法 的 收敛 许 分 析 。 现 假定 F 满 足 假设 1 和 假设 2， 则 当初 
始 近似 解 x, 和 初始 矩阵 B。 分 别 充 分 接近 x* 和 F Oe), A 
9.2. LERENA RE YI (х, 超 线 性 收 敏 于 方程 组 的 解 x"。 为 了 
证 明 这 一 结论 ， 首 先 证 明 以 下 几 个 引 理 。 

引 理 9,3.1 ЖР. К-К" 满足 假设 1 和 假设 2, xC D fü x 
由 算法 9.2.1 牛 成 且 设 xED， 则 


КВ-ЁР'(х*) pS] B- F’ (x*) ,+ ro (x,x), (p= 2, F) 


(9.3.1) 
其 中 


с(ж, жх) = тах {іх - х" |, |х"), (9,3,2) 


证 (09.2, 5) 2 


Г 7 + T 
B -Р'‹х*)=(В-Е' (1 „Ж Мау БАСА 


(з, у (s, %) 4 
(9.3.3) 
上 式 两 端 电 欧 数 ， 据 习题 9.1 一 9.3 即 有 | 
ПВ -F(a 1,18 -F (х) lp + Тока, 


据 引 理 8, 4,4 有 


Jy- Е (x")s|| ко (x, x) Iai 
成 立 。 至 此 (9.3.1) 得 证 。 
引 理 9.3.2 ЇР; R"'—R"' 满足 假设 1 和 假设 2， 又 设 (B,) 
为 一 非 异 盾 阵 序列 。 如 果 对 其 x, СРЖ] 
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х,у =X BP F) (Ка 0,1, 6) 

арф B. x 8 x* (УКасд), ХОКУ T x*, ЯЖ 
ж BS 24 мл 

lim TEB, -F (xt) 10+. а) = Ü (9,3,4) 

ры [Xpt T XR) 
Bi, {х,аР 

证 若 (9,3.4) 成 立 ， 则 因 
EB, — F(x*)] (x, -X9 = — F(R) – F” (x*) (xX,, , — Xs) 
= [F (x...) — F (x,) — F” (06%) (G, í — X.) 1 


-Е(х,.1), (9,3,5) 
于 是 
Filx,,1) ' 
пиз жук; i, «кт (Ks 51) 
+lim 128, – Ё? (х*) (xw — x.) i 
pem Xaa 一 2 
ЁК 
| 1 
lim LE). ч = 0. (9,3.6, 


«= х,у — Ж! 
又 因 F (х*) ЖЕЕ» ТЕТЕ ТЕ, чк DARNA 
ГЕ Ge yk = ПЕ Са, 1) — Ё(х*)\ > 2 Віх,. у — x* 
(习题 8. 11) 。 据 假定 ， 对 所 有 K 沽 0， Ге и. 故 
34 k 充分 大 后 有 


омой >. Ва -zl 
[Xr 1 — Xl [Жүк = х# + (х, 一 X#|| 
== ae 
1+а@, 
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其 中 q = |х —х* о, a, ў (9,3,6) 419,/ A + q,) И 
Р, AiE 44 Т, EEA 8.3.29 (х,} шаи 
а а 
Бл, Hx BL RPE Рх H F (x*) —0, MA 
ОР бә, Dl Р(а,,1) Fo х—х*|_ 


И Н Н | РД 
х1 7-х, | 2х, — x. „+1 — Xa! 


1 


TERES 8, 4,3 (8, 3,3). (8,3,4) ря 


lim Р(х.)  - 
кз !х,,,—Х.| i 
再 利用 (9.3.5) 式 即 可 推 知 (9.3.4) 式 。 
定理 9,3.1 Р: R"->R' 满足 假 没 1 和 假设 2, 则 Broyden 
算法 9.2,1 МВБ. ЖАРУ, наг, 存在 正 数 e 和 6， 妆 
IIB, — F” (х9) 13. х-ке, {хн х*, 


КЛЕН. д ОРНА 
Ш iasi F a, 有 取 6< oyo ES- ERES 


(х*,еусср, Bl x,. B.W R AE pss R, Ej Banach 引 理 | 
B, ЧЕ Fe El. 
|B S&a - a6) t =Y, 
Хе ЖИ УУ ARET Р(х) FE, A х, 是 完全 确定 的 、 据 
引 理 8, 4.4 及 定理 假设 应 和 有 
|x, -—х*л=|х,—х*—В;'(Ё(х,) — F(x*)y! 
~ Ву Р(х у) — F(X*) — B, (х, — х%) i, 
ВГ F (mi) ~ F (x*) — Е'(х®) (x, — x*) | 


A A 


+ F'(x%) ~ Boil x, — x* :J 
&7( кіх, —x* ° +04, — х ||) 
+331 = 


<r +) х, — x* 


<7% -a*l 


由 此 可 见 x; € S(x*, e), Fix f B. Е. ARE. 3.2 
即 可 推 得 
IB, —F’ (xX*) |< B, -F (x%)| +ко(х„.х,) 
<ó + K||x, — x* | 
1 3 Р 
= д +79= 了 <20， 
于 是 据 Banach 5%, B, 为 非 异 且 
1Bi<c(1- 200) ~! | 
Вх, Ec uj ЕНУ. MERABRE: х, +#, ВТ, 
en ВТЕ Н Ч к«п h£ 
\х,-х*<--х,., -х* , |B,- Е'(х*%) i<(2 5З (2) }. 
于 是 ， 据 Banach 引 理 知 ，B, 为 非 异 且 
IBP <а(1 – 205), 
这 就 保证 了 xx ， 1 存在 。 另 一 方面 


[x,,, — < 了 EUFCx) — F (8) – F” (x*) (х, х") || 
+ |F” (x*) —В„ ух, — x*|1 
абі —2a0) ` [T xi, е) (2 (5 У), ж |1 
га -z0 [()(Ф)+(@--у) )е] -xi 
<а(1 — 20$) ` 1261|x, — x* || 
L ТУЫС, 
<-у\х„-х*|. 
шх... € S(x",e) 。 其 次 
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Bnei -F(x <В, – Е (9) | + KO (X, X,. I) 


«(уннн 
<|G-G)):(2) 1 
087 
至 此 归纳 证 明 完 成 。 
综 上 所 述 ， 序 列 (x). (в) 均 存在 且 |х,-х*|<(-—у) 
|x, 6], И Broyden 方法 至 少 是 线性 收敛 的 ， 
以 下 进一步 证 明 Broyden 方法 是 超 线性 收 化 的 ， 据 引 3 


9.3.2 知 只 要 证 明 (9,.3.4) 式 成 立即 可 。 
通过 直接 计算 即 可 证 明 


(1 (s, Л 


其 中 EER"*。 ХУЩЖ (0° — 8°). ca – (20) R (0<8=< 
м 2а) 8 


n a s 12): (9.3.7) 


kh- y ).. «Е – (1Е11,) 7 ча) (9.3. 8) 


现 令 EE = В, -F(x ПЕ! = M. (9,3. 3) ЖН 54,09, 3. 8) 
和 引 理 8,4,4 即 可 推 得 

Naai SCL- (212) 7 win, + ко,, 
其 中 


IEB,- F’ asl 
[ssl 


ў. = - 


° 3838 = 


а ВНЕСЯ, Ма, -х*\< + ce。 另 一 方面 ， 由 引 理 
9.3.141, Mi Sto ЖЕТ, AR. 
设 AEREA WARA k HYR 
(292) ар, - у + ко,, 
于 是 
туз әрт, +K 5р, 


Ё 
<ó +È А) рхо — xX*| <ó + 2ке, 
= 


由 此 可 见 (0, EATE, ЖП; 3。4) 式 成 立 。 


第 九 章 у Ж 


9.1 Ra, bE Я", Е. leb = {а,Ь = lab" fr. 
9.2 Жа,ьЄ Я" Нат = 1, 试 证 ， 

111-67 ||. = ala Ibiz; 

ii) 上 ~ 27|: = 1093683834 Aab et, 
9.3 设 A,BE R" "і, 

[АВ | тіл: JAJ BJr, АВ, r. 
9.4 ШЕЕ а. УСА", A. BER" 试验 证 ， 
(А) = |А- В|, 

УМ = (A| As = у} ЕРЕ ЕЕ Ж. 
9.5 ЖАЄА" "Еб, u,v А", 177, 


A luelA- 1 
q + 7А 


(А + шут) 1 = A`! - 


其 中 1+ оТА (у Sherman- Morrison 公 式 ) 。 
9.5 BERVI SER О, ИСА", 假定 BS 和 V7B-10 一 5-1 为 
非 异 。 试 证 ， 

(B+ USY 门 -1= 昌 -1 一 号 -IUTTYTB-: 


.. 584 -* 


其 中 S 1+ T-1= VTB-1U (Sherman-Morrison .Woodbury 公 式 )， 
9.7 EF, R"->R" 满 足 引 坦 9.3.2 的 假设 ， 如 果 对 某 xoED 出 

Xip xi MBE F (ху) (k = 0,1,+) 
БОЙ Еа Е Е К Н (СЮ Fx*, ЛЕ (9.3.0) 
RER, Ек Н RUS Вв, ОПА НКТ. 
9.8 FBAR. 2. 1p 9,2,1. 
9.9 试 证 等 式 (9.3.7)， 
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